广告投放中的AB test

A/B test,也叫做拆分测试,是在控制其他变量不变的情况下,对同一个变量进行拆分对比,观察变量拆分之后的情况,并采取合适的动作。

在广告投放当中,非常重要的一个操作方法是 A/B test,广告在展示过程中通过广告点击进来的人群是广告投放人员潜在的转化人群,我们往往希望可以得到更高的转化率,而通往更高转化率的道路,大部分是基于A/B test,通过A/B test来收集用户数据,了解广告投放中的不足之处,并以此为依据采取更为科学的行动。

采取A/B test的原因和动机

· 解决用户的痛点;用户在访问落地页时候是带着某种期待而来的,然而在大流量的情况下,用户流失的原因是存在某种共性和规律的,比如表单填写过于复杂,页面内容繁多,难以有效寻找需要的内容,这些都可能会是用户流失的原因,A/B test所做的工作就是在不断测试中去判定某种原因和寻求改进。

· 在现有基础上获得更好的效果;公司的生存基础是以盈利为目的的,在现有的利润基础上,公司希望可以获得更好的利润率,而A/B test可以让公司在现有的投入情况下,进一步优化流量的利用率,即使是很小的改变对公司来说可能都是非常的利润改进空间,这使得公司有足够的动机去采取A/B test

· 小规模的修改不会显著的影响现有情况;A/B test往往不是一开始就对整个版本做出全部更换,这不符合A/B test的原则,通常都是依靠已有经验,从可能影响转化的元素入手,等到做出改进之后,再慢慢扩大,直到整个版本都得到更新,新的版本的上线,意味着转化率的进一步提高

A/B test的步骤

图片1.png

  1. 研究现有情况;我们必须对现有的情况有一个很好的把握和了解,才能在这基础上制定合理的A/B test计划,观察流量数据,比如访问量、用户停留时间、访问内容、跳出率等,从落地页角度来说,热力图是一个非常好的分析工具,借助热力图我们可以看到用户在落地页上面的行为轨迹和关注的内容,这仅仅是从数据上反应出来的内容,而另一种方式是借助问卷调查的方式,可以了解到一些在数据上面无法反映的影响点以及我们由于思维惯性无法思考到的

  2. 提出假设并且制定所需达到的目标;这是我们采取A/B test的理论基础,在基于研究现有情况的基础上,做出提高转化率的合理方式的假设,并为其制定一个合理的业务目标,在准备好这些之后,就可以采取A/B test了

  3. 确定控制变量和变体;前文提到,需要在控制其他变量不变的情况下来采取行动,比如时段、周期一致,除去所需控制变量外的其他变量一致,针对控制变量采取变体,这变体是针对上一个版本而更换的新版本,从而测试哪个版本表现更为优异

  4. 采取A/B test行动,现在我们所需要做的就是将A/B test部署到线上环境,测试转化目标,观察数据的变化,确定哪个版本更为优秀,从而确定哪个元素的表现优异,值得注意的是,A/B test需要一定的样本量来确定实验的结论是否可靠,这决定了我们所需的测试时间

  5. 数据分析与结论改进;这一部分主要涉及到统计学方面知识,通过一些度量标准,例如百分比增加,置信度等来考虑我们所采取的A/B test是否合理科学

主要进行A/B test的元素

· 网站的标题主图;这是用户进入到落地页第一眼看到的内容,而这块的跳失率是非常高的,因此优化标题主图的重要性是毋庸置疑的,不同的排版设计、例如出现的画面是动物还是人类、眼睛是直视你还是低头瞧地,可能都会产生不一样的影响,尽可能的找到影响转化的元素,并采取行动。

· 导航;导航这块的内容主要是要确保用户可以简单的从主页出发找到所需的内容,而不同的导航布局可能会对用户产生不同的影响,利用热力图观察用户主要点击的导航的内容和位置是什么,并添加更换导航的内容,测试用户的反应做出更好的改进

· CTA;通过更换号召性按钮以及修改表单填写内容来进行优化,比如亮度更高的按钮可以使得用户更为明显的找到采取行动,而用户的耐心是有限的,过多的表单内容可能使得用户流失

· 整体设计布局;在落地页一章提到了关于落地页的排版布局,而落地页内部关于产品的展示顺序是否容易查找,对于用户来说也是影响流失率的原因,比如大多用户倾向于无线耳机,但是在展示的第一栏都是有线耳机,这可能使得用户没有耐心而流失,一步步的测试布局内容是必要的

A/B test容易出现的错误

· 缺乏足够的假设和目标设定

· 没有控制好其他变量,一次性测试过多变量

· 忽略统计学意义

· 测试流量的不平衡

· 测试结论具有偶然性

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,189评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,577评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,857评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,703评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,705评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,620评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,995评论 3 396
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,656评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,898评论 1 298
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,639评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,720评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,395评论 4 319
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,982评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,953评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,195评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,907评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,472评论 2 342

推荐阅读更多精彩内容