【自研开源】出色的一站式自动化测试平台ATP-UI自动化篇

作者华测知一

更多精彩内容关注 公众号程序员一凡

目前测试平台项目研发已经完成并且在Github开源,有兴趣的朋友可以去Github下载https://github.com/ooqitech/ATP

大家有兴趣可以下载来玩一玩

前言:

ATP(Auror Test Platform)是一个集成接口-UI自动化的一体化测试平台,关于ATP和如何对服务端接口测试方案已介绍了,这篇推文将介绍ATP对于UI自动化测试的解决方案。

你是否曾想过,不使用任何自动化框架,不写代码的情况下,写好功能测试用例后,点击某个按钮,一个web系统/app就自动点来点去;并能按你的思路,在线执行UI自动化测试、回归测试;解决日常工作中一些重复繁琐,无聊费事的工作。

没错,ATP已实现可在线执行web/手机的UI自动化测试。它让测试工程师在做UI自动化测试时:

脱离测试框架、代码、环境依赖在线运行

无需连接usb的在线真机运行

UI测试与api测试用例互相调用串场景运行

脱离Jenkins定时运行冒烟测试,测试计划

先看一个移动端UI自动化用例运行效果:点击执行按钮→自动跳转真机远程控制界面,运行测试用例


本文将从以下几点依次介绍:

UI自动化简介与痛点所在

整理架构与设计思想

web端使用说明与开发思路

安卓端使用说明与开发思路

未来规划路线


UI自动化测试简介:

其实早在2004年ThoughtWorks公司,一个测试工程师就实现了基于JavaScript代码库的自动化测试工具,Selenium1.0诞生了。

误区:UI自动化仅限对于界面的排版,按钮,颜色等UI测试,但其实是通过界面UI来验证系统业务逻辑

原理:通过脚本语言或者工具,模拟用户行为操作,最接近用户真实场景,实现对web/app自动测试

真实价值:代替大量的UI重复操作,让测试用例重复使用,缩短反馈周期,为企业减少了时间和劳力成本。因为从测试的行为本质上看,人工UI测试和自动化UI测试没有区别,唯一的区别是一个由人来执行点击,一个由代码或者工具执行

UI自动化的痛点-ATP的优势:

不过我感觉到,大家极度关心的UI自动化测试离我们越来越远。因为在实践中,经常是这样的画面:

熟悉某套自动化测试框架花了多久

熟悉某个组织用例和代码的框架花多少天

写完一大推自动化用例代码后,多人协作,项目如何整合

各种运行环境依赖,如何可持续集成

行成完整的UI自动化体系耗时很长...

我们先看一个简单web端自动化测试用例,

如图所示:

以上仅是一个测试用例,未涉及到数据、版本、项目整合、持续集成等,何况还有移动端UI自动化,选择的自动化测试框架可能又不同.......

想要做好UI自动化,基于拥有一些经验丰富,熟悉一门开发语言和主流自动化测试框架的测试工程师的前提下。 这也是为什么UI自动化测试是处于测试金字塔最上层,因为它确实投入成本大,专业性要求高

所以,当你还纠结选择用什么开发语言,用什么测试框架来进行UI自动化的时候,越纠结,ATP研发对UI自动化测试的解决方案想法越是强烈,下面分析下俩者的利弊:

换句话说,用ATP进行UI自动化测试,“低投入,高回报”。

说出来你还有可能不相信,ok,接下来,我们就来了解一下ATP的一些设计思想、实现过程以及功能效果展示,看它是如何来进行web和app的UI自动化测试,然后快速上手吧

ATP对于UI自动化前后端交互架构设计:

整体框架采用的是前后端分离:

前端:vue.js+elementUI

服务端:flask

数据库:mysql,Redis

UI自动化框架:web端-seleniunm  移动端automator2


ATP对于UI自动化一些设计思想:

测试环境与测试用例分离

测试用例与被测页面对象分离

页面元素管理采用POM模型

用例管理:项目→系统→模块(1~n)→用例集→测试用例

用例相互串联:UI与UI用例,UI与接口用例串联,实现业务串场景需求

web运行环境:Selenium grid分布式用户本地浏览器 ;chrome的headless模式、基于Docker的selenium/hub镜像容器

app运行环境:用atx-serve对测试安卓真机进行集群管理,仅需要知道测试机的ip,无需连接数据线,就可以进行真机自动化了

用例组织框架:unittest

测试报告:HTMLTestRunner库

用例实时推送日志:前后端建立WebSocket连接,在线调试与实时日志

测试计划:linux中Crontab命令触发,批量定时执行用例

ATP平台UI自动化核心功能:

测试用例增删改查

用例支持(xmind、excel)导入/导出

页面元素对象采用POM模型

用例批量复制

UI用例与UI用例之间可相互进行业务调用

UI用例与接口用例之间可相互调用

app可扫描用户在ATP上传的二维码图片

用例支持分布式用户本地/服务器运行/真机运行

支持用例批量运行

测试结果报告展示,附带错误操作截图

测试计划,定时执行,发送email警告邮件

功能介绍和开发思路:

1.用例运行如何区分Web/App-环境与用例分离:

ATP是同时支持web端/app端的UI自动化测试,所以第一步先配置环境信息:被测系统的类型、URL/APP包名

思路:分别定义运行web/app俩个测试类,运行用例时前端调用一个run接口,根据前端请求参数中系统类型,然后添加相应的测试类至unittest.TestSuite然后运行,


如图所示:设置系统类型web,录入网站的url


2.众多的页面对象元素如何管理-POM模式

UI自动化原理是模拟用户操作页面上各种元素,换句话说首先得定位元素,因此第二步配置被测页面的元素,ATP支持常见8种定位元素方法,先了解一下POM以及xpath定位控件

POM (Page Object Modle): 页面根据系统来管理,而元素对象根据页面来管理,可以将测试用例与被测页面对象分离,页面元素与系统分离

POM优势:页面元素对象根据系统统一管理,可重复利用;易于维护。例如,前端某个按钮或名称修改,所有操作到该按钮的测试用例不需要修改,仅修改按钮的元素值

思路:前端配置好页面对象,以key-value的方式存储于数据库表中。当用例的操作步骤用到该页面对象,将对象属性作为参数,去调用一个返回webElement的公共方法,此时就可进行click、move、send_keys等操作


灵活运用xpath:xpath虽可通过浏览器开发者工具直接复制,但是复制的往往是绝对路径而且不稳定。所以我们可以根据Dom节点属性、文本值等方式相对路径定位;把复杂的位置描述封装到一条短短的字符串里面,灵活、稳定且万能

例如:同一元素,前者是复制的xpath,后者是写的相对路径xpath;这样写让用例稳定且容易阅读

如图所示:配置某被测系统页面元素,该系统下的用例就可直接引用这些对象,进行点击、输入操作


3.用例信息何如管理-以一个字典存储,运行时再加载

配置系统环境和页面对象之后,第三步就可新增测试用例;也证实上文提到的设计思想:测试环境、被测页面对象都和测试用例分离,用例主要包括:

基本信息:添加用例标题,描述信息等

前置操作:初始化数据,数据库操作、执行其它前置UI用例,让用例更灵活,串联成一些流程场景

操作步骤:支持元素点击、键盘输入、鼠标移动、执行javascript(例如滑动滚动条,切换窗口)、切换frame、执行接口测试用例、app扫描二维码等等

预期结果:当前元素在页面可见/不可见,可见的次数、元素可操作/不可操作、数据库校验等

实现思路:将前端配置好的测试用例所有信息以字典列表(因为可能批量执行用例)的形式存储于数据库表中,运行用例的时候再去组装和加载用例信息,再调用unittest中subTest方法和selenium API去执行用例

如图所示:就是配置测试用例的过程


配置完成后,将直接以表格的形式展现整个用例的操作过程,一目了然,这个用例what to do,,仔细一看其就是一个功能测试用例,因为ATP已将功能测试用例和UI自动化用例合二为一:

如图所示:就是一个登录用例的过程

4 .用例运行环境(web端)-本地浏览器grid/headless

ok,所有配置工作都已就绪,我们就可在线执行UI自动化测试了,有点跃跃欲试!

如图所示:可知被测系统类型是web端,它的URL,


点击执行用例按钮,会自动弹出一个浏览器,当然如果你只关心运行结果,可以选择不弹出本地浏览器,它会在服务器上默默的运行,而且测试报告每步操作都附带截图

思路:运行环境本地浏览器grid/无头模式headless

本地浏览器:使用Selenium Grid,远程操作浏览器。服务器作为hub,用户本地浏览器作为运行Node,

hub: 参数值表示管理中心的url地址

Node:连接hub进行节点注册

通过SeleniumGrid可控制多台机器多浏览器执行测试用例,如图所示我在一台机器上注册5个浏览器node


也可选择浏览器无UI界面在后台运行:

chrome的headless模式

如图所示:ATP在loading中,正在本地执行测试用例,然后自动弹出浏览器,打开了快递100网站登录


用例执行完成后:ATP loading完成,浏览器自动关闭,然后会显示一个查看测试报告的按钮


5.测试失败如何在报告加截图-HTMLTestRunner

测试报告使用第三方库HTMLTestRunner

思路:使用selenium中get_screenshot_as_base64方法, 获取页面截图的base64编码


点击显示截图按钮:可循环查看操作过程,如图所示,登录测试用例,第一步:输入了用户名,


6.app用例如何在线运行-集群管理

app测试用例的配置与web测试用例配置完全一样

实现思路:将测试机用atx-serve进行集群管理,再远程控制手机界面。

在服务器上启动rethinkdb,再将测试机进行初始化:

$ rethinkdb --http-port 8090    

$python -m uiautomator2 init  服务器 ip

这时打开url:测试机ip地址:7912/remote 就能访问手机远程控制界面


如图所示:点击运行按钮,可选需要运行的测试机

点击确定运行,自动进入远程控制测试真机界面,运行了被测APP,且实时查看app的运行状态


7.app如何进行扫描操作-二维码push至手机sd卡

在编辑测试用例时,操作步骤选择方式为:扫描二维码,然后上传本地图片,即可扫描二维码

实现思路:用户在前端上传被扫描的二维码图片,后端储存于服务器,再推送至测试手机sd卡的指定文件夹下

app扫描时从相册中去选择,该指定文件夹下用户上传的二维码图片,实现扫描,之后再删除图片,保证每次该文件夹是用户最新上传的二维码


(对软件测试感兴趣的可以扫一扫)

8.如何定时测试计划-Crontab命令

测试用例不仅可在线运行,可定时执行冒烟测试、测试计划,然后发送邮件测试报告

思路:通过linux中Crontab命令触发定时批量执行

如图所示:每周1-5中午12点半,定时执行某个系统下的自动化测试用例



了解这些功能和效果展示后,对于ATP的UI自动化测试是不是能快速上手,不仅在项目交付中实现UI自动化测试,且将UI自动化用例与功能测试用例已合二为一

未来规划路线:

IOS移动端UI自动化

移动端app多维度的性能测试

用例多线程、并发执行,提高效率

支持视频回放操作,快速定位出错原因

结语:

ATP一体化测试平台,让接口和UI测试用例变得更简单,让QA更专注于测试用例本身的设计

这次的推文后,ATP已经介绍了接口测试方案,UI自动化测试,APP自动化,然而ATP远不止这些功能,还有接口压测、基准测试等等,请继续关注我们,不要吝啬你们的需求和建议,我们会不断的完善优化。

整理了一份216页软件测试大厂面试题,以及2020推荐最新的简历模板,送给小伙伴们,关注公众号程序员一凡回复【简历】自行领取,和一些小伙伴建立一个技术交流群,一起探讨技术,分享技术资料,旨在共同学习进步,如果感兴趣就加入我们吧!


视频课相关资料加群1079636098获取,还可领取更多软件测试面试题资料和Python自动化/测试开发学习资料。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,839评论 6 482
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,543评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 153,116评论 0 344
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,371评论 1 279
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,384评论 5 374
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,111评论 1 285
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,416评论 3 400
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,053评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,558评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,007评论 2 325
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,117评论 1 334
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,756评论 4 324
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,324评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,315评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,539评论 1 262
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,578评论 2 355
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,877评论 2 345