UI自动化测试工具设计

需求来源:在项目中,需要对UI进行测试,确保UI逻辑的正确性。在UI逻辑测试中,用例的编写是一个”劳动密集“型任务,需要一边操作,一边编写用例的步骤,为了能够清晰准确的描述操作,还需要很多辅助描述信息。如果考虑到后期的回归测试,以及UI修改变更维护,这个事情将严重影响团队的测试效率。

目标

人工操作是不可避免的,在产品发布后,人工必须将所有功能都执行一次。如果能够将人工执行动作自动转换为用例操作步骤,那么将极大提高测试效率。事实上,已经存在一些类似工具,例如比较知名的QTP。核心概念就是记录-回放
既然已经存在了相关工具,重新设计的意义何在?主要有两大原因:一,现有工具是国外产品,版权存在限制,在当今国际形式下,存在极大的版权风险;二,现有工具开放性不足,扩展性差,不适合自身使用需求。
与国外现有工具相比,本工具将主要满足以下特点:

  1. 支持与禅道进行用例管理集成;
  2. 支持基于图形、句柄、文字识别多种方式进行记录;
  3. 支持快捷键模式切换;
  4. 支持快捷键添加结果验证;
  5. 支持记录、回放扩展,以应对不同应用场景;
  6. 支持多端应用测试;
  7. 针对大型项目,能够进行多人协作用例设计;

核心点:

  1. 扩展性,支持不同执行记录、回放实现;
  2. 开放性,能够与不同项目管理平台集成;
  3. 高效性,通过快捷键将用例设定操作集成在被测系统使用过程中;
  4. 多人协作;
  5. 统一性,实现多端统一,支持桌面、web、手机APP、嵌入式。

整体设计

流程划分

记录-回放模式下,主要有三个核心流程:执行记录记录编辑记录回放执行记录,主要根据用户执行,自动生成“记录”,也就是自动化执行的脚本。记录编辑,是针对自动生成“记录”的编辑过程,目的是删除记录中的冗余动作,提升记录的鲁棒性。记录回放,是针对记录的自动执行。
其中,执行记录与记录回放是系统的核心流程,影响了系统的可用性,记录编辑影响了系统的易用性。

业务概念

在系统测试中,用例主要源于需求,同一个用例可以覆盖率多条需求,同一需求也可以由多条用例覆盖满足。需求与用例之间是一种多对多的关系。一个用例由多个执行步骤组成,执行步骤是用例的最小组成单元。在用例描写中,存在前置条件的设定,前置条件可看作一组共用的执行步骤,从这个维度来讲,用例完全由执行步骤组成。
在本系统中,存在四个业务概念:执行步骤执行逻辑用例可变参执行步骤是可被多个用例复用的基本操作单元。执行逻辑是对执行步骤的组合,包含执行控制逻辑,分支、循环。用例执行步骤执行逻辑的组合,精确的描述了执行过程。可变参代表了执行步骤执行逻辑用例中可被修改变化的内容,是用例自动化执行的核心,在执行步骤中,可变参体现在输入信息的可变,在执行逻辑中,可变参体现在控制逻辑(例如,循环次数)的可变中。

体系架构

顶层架构

从目标需求(多人协作)与业务逻辑(执行步骤复用)出发,系统整体架构为C/S架构模式,服务器主要用于测试数据(主要指执行步骤、用例)管理,客户端主要用例产生、访问、执行记录数据,以及与第三方管理平台进行数据集成。

顶层数据流架构

系统与第三方系统集成时,主要的交互数据是用例。用例数据将以两种形态存在,一种是由执行逻辑与执行步骤生成的执行描述文件(包含用例唯一ID,以及执行步骤描述);另一个是精确的逻辑执行文件,包含了即时冻结状态(即支持历史版本使用,当然也支持最新版本标记使用)的执行步骤、执行逻辑、资源文件等。
用例与第三方平台是否同步,由系统使用者决定。第三方平台用户登录信息,只保存于客户端本地数据中,更换机器后,需要重新输入。

系统分层架构

系统主要功能集中于客户端,所以将主要针对客户端进行细节阐述。系统将主要构建为四层,从上到下分别为:业务层扩展层业务基础层基础层基础层,主要是公共基础服务模块的封装,例如日志。业务基础层,是与项目相关性极大的基础模块封装,例如鼠标事件监控模块。扩展层,是针对业务基础层中模块的扩展,例如基于图像处理的屏幕对象识别扩展实现。业务层,针对业务要求,实现记录-回放业务层,在细节上,又被划分为三个小层,分别为UI层业务扩展层业务逻辑层
在系统实现中,业务基础层扩展层包含的主要模块有:交互监控模块交互控制模块对象识别模块记录生成模块记录执行模块数据管理模块业务层包含的主要模块有:执行记录模块业务交互模块用例编排模块业务扩展模块用例编辑执行系统

系统分层架构图

关键业务操作流程

核心操作流程如下:

  1. 新建/打开项目;
  2. 新建用例;
  3. 选择/新建、记录执行步骤;
  4. 重复3,直到完成所有执行步骤;
  5. 编辑执行逻辑(工作流引擎图形式);

几个要点说明

  1. 选择一个已经存在的执行步骤时,设置可变参后,自动执行该执行步骤;
  2. 在已存在的用例中,在某执行步骤前,打开/新建执行步骤时,执行步骤可针对后续执行步骤(一个或多个)设定插入、替换、分支等操作;
  3. 在记录编辑中,应能单独执行某执行步骤,对于快速编辑记录有重要意义。

关键技术

在本项目中,核心难点是对象的识别与匹配,如何能够高效、准确、高鲁棒的进行对象识别、匹配,是本项目可用性中最大的影响因素。

后注

本文是针对UI自动化工具的一个思考,是一个开端,既不完整也不完善。一个完整的设计,应该具有以下特点:

  1. 充分的领域调研;
  2. 需求驱动的架构设计;
  3. 架构设计不仅是空间完整,还应该是时间完整的。

前两点应该没有疑问,很好理解。针对第三点,空间完整主要指,架构设计应该要包含细节,能够充分展示最终系统的设计细节,而不应该仅仅是几个模块组成、交互图,时间完整主要指,架构设计应该指示演进过程。一个复杂系统,并不是一下完成所有细节,而是经过多次迭代,逐步完善的过程。
针对以上不足,我将在另一篇文章中,进行更加完整的描述。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,839评论 6 482
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,543评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 153,116评论 0 344
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,371评论 1 279
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,384评论 5 374
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,111评论 1 285
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,416评论 3 400
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,053评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,558评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,007评论 2 325
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,117评论 1 334
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,756评论 4 324
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,324评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,315评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,539评论 1 262
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,578评论 2 355
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,877评论 2 345

推荐阅读更多精彩内容