性能测试结果面向业务部门如何处理

业务部门在性能测试中一般都是需求提出方,但是受限于技术背景和性能测试的认知,测试工程师要将业务部门的业务需求转化为可验证的技术指标,如TPS、并发数等。这就给测试工程师带来新的问题:针对技术性的结果指标,业务人员与测试工程师无法形成统一的认知出现理解偏差。所以线上业务出现性能问题,最后还是由测试团队“背锅”。

例如,测试工程师的测试结果为:当有200个并发用户时,TPS为986.69笔/秒,系统处理响应时间为2.46秒。在最终的评审会上,业务人员可能理解为当前系统只能承载200个用户使用,在动辄用户数超过10万的活动需求下,这个结果一定会被质疑,从而带来更高的解释及沟通成本。因此建议将测试结果从业旁视角进行展示。

一、业务维度的度量指标

为了避免上述的情况,在展示测试数据时,需要将技术数据转化为业务指标数据,直观地呈现给业务人员。仍以上述场景为例,最终的测试结果可以转化为如下形式。

场景:描述测试覆盖的业务场景和测试系统的节点个数,比如在标准下单流程中节点为60个。

业务分布:按照当前业务场景的流量占比来展示,如首页38%,进入菜单38%,加入购物车22%(包括匿名用户),下单流程(包括加入购物车)11%。另外,还要配合其他数据,如当并发数为200时,TPS为986.69笔/秒,订单为61个/秒,系统处理响应时间为2.46秒。

业务结论一:如果按照用户操作的整体等待时间为5分钟(300秒)来计算,系统能够支持的在线用户效约为986.69x(2.46+300)=298434个。

业务结论二:如果按照用户操作的整体等待时间为3分钟(180秒)来计算,系统能够支持的在线用户值约为986.69x(2.46+180)=180031个。

对此,业务方就能直观地了解到,在60个节点的环境下系统实际承载的用户数、每秒订单数等是多少以便快速判断是否满足预估的业务需求。

二、业务性能基线

针对性能测试,业务人员不仅关注单次的测试结果,还关注每次选代后业务的性能表现是否有所改善。

例如,某个业务一年选代10次,如果每次的选代性能下降1%,在测试阶段感知较小,但是将下降率累计,其性能表现最终会相差10%以上,这个时候很难进行有效补救。因此对于每次业务选代,都要记录测试结果形成性能基线,从而展示业务性能趋势。当为下降趋势的时候,测试工程师和开发工程师应马上进行补救。如下图所示,3月份出现TPS下降,其实在上一年12月的测试数据已呈现突然下降趋势,若测试工程师只分析了3月下降的原因,可能只修复了一部分缺陷。基于基线模式,建议测试工程师配合上一年12月的测试数据一起分析,查看是否为同一个原因导致的。

将性能测试结果有效地传达给业务部门,是确保技术改进能够支持业务目标的关键环节。以下是几个建议,帮助你更好地与业务部门沟通性能测试的结果:

转换语言:

使用业务部门熟悉的术语来解释技术概念。例如,避免使用过于专业的技术词汇,而是用“响应速度”、“用户等待时间”等更容易理解的语言。

强调性能测试结果如何直接影响用户体验、客户满意度、转化率等业务关键指标。

突出影响:

清晰地展示性能问题对业务的具体影响。比如,如果网站加载时间过长导致用户流失,可以具体说明这可能导致多少潜在客户的损失。

使用图表、图形等方式直观展示性能测试前后的主要变化,使非技术人员也能快速理解。

提出业务价值:

解释性能优化的潜在商业价值,如提高网站访问速度可以增加页面浏览量、提高转化率等。

量化优化带来的预期收益,比如预计可以提升销售额的百分比或是减少运营成本的具体金额。

建议行动:

向业务部门提出具体的改进建议,并说明这些措施如何能够解决问题并带来正面影响。

如果有多个优化方案,可以列出各自的优缺点及预期效果,帮助业务决策者做出选择。

协同工作:

表达愿意与业务部门紧密合作的态度,共同推动性能优化工作的进展。

建立定期汇报机制,让业务部门了解优化工作的最新进展和成果。

教育与培训:

提供必要的培训或研讨会,帮助业务部门成员理解基本的性能概念及其重要性,增强他们对性能优化工作的支持。

案例分享:

分享行业内其他公司成功优化性能的例子,特别是那些与你们公司业务模式相似的企业,以此激励内部团队采取行动。

通过以上方法,你可以更有效地将性能测试结果转化为业务部门可以理解和接受的信息,从而获得他们的支持,共同推进项目的成功。

阅读后若有收获,您的关注,分享,留言评论等是对我最大支持!!!

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,482评论 6 481
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,377评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 152,762评论 0 342
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,273评论 1 279
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,289评论 5 373
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,046评论 1 285
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,351评论 3 400
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,988评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,476评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,948评论 2 324
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,064评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,712评论 4 323
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,261评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,264评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,486评论 1 262
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,511评论 2 354
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,802评论 2 345

推荐阅读更多精彩内容

  • 《发表于:2018-1-03 11:29 作者:老_张 来源:51Testing软件测试网采编》 我是复制...
    崔x阅读 2,150评论 0 5
  • 一、准备工作 1、系统基础功能验证 性能测试在什么阶段适合实施?切入点很重要!一般而言,只有在系统基础功能测试验证...
    WeiFong阅读 342评论 0 0
  • |—1、性能测试简介 指通过自动化的测试工具]模拟多种正常、[峰值]以及[异常负载条件来对系统的各项性能指标进行测...
    东尼大木V8阅读 1,225评论 0 0
  • 一、准备工作 1、系统基础功能验证 性能测试在什么阶段适合实施?切入点很重要!一般而言,只有在系统基础功能测试验证...
    C1R2阅读 1,000评论 0 0
  • 一、准备 1、系统基础功能验证通过后 性能测试在什么阶段开始介入? 一般只有在功能测试完成后,系统趋于稳定的情况下...
    小钱哥哥阅读 39,428评论 0 1,030