什么是AB测试?
一、为什么要做AB测试?
看几个灵魂深处的问题:
这几个问题,基本上就是在整个移动营销链路中经常遇到的问题,直达灵魂深处,甚至你的大部分会议都会来自于这些点,与其开会讨论那个更好,不如来个ab测试尝试一下。
二、怎么做AB测试?
1、明确目标
对于任何一家公司,任何一个团队,都有着一个明确的业务指标。比如常见的电商企业就是GMV,比如游戏企业常见的就是ROI。那么你的工作目标什么?
首先推广环节,一般来说就是ROI最好,投产比最高,其次用户进入App内,一般来说就是留存、付费等。
2、有了目标该做什么
首先,将所有投放账号授权给Adsdesk(智能投放平台),这样可以看到所有账号在不同媒体的广告计划表现。
其次,对接TrackingIO(第三方广告监测与归因平台),监测用户全链路数据,比如付费数据,LTV,留存等等。
最后,使用AdsDesk进行广告投放,对广告计划进行AB测试,找到最优转化。
3、开始AB测试
有了清晰明确的目标后,可以开始进行ab测试了,这时我们需要做第一件事,定义变量。推广环节的每个AB测试都会涉及到真金白银,故对变量的测试也需要根据实际情况进行优先级排序,常见值得你去做AB测试的变量List如下:
创意环节:
定向环节:
②地域、年龄、性别
③行为
④偏好
其他方面:
①出价
②投放模式
③投放时段
④自动化策略等
PS:关于创意环节,我曾经介绍过如何科学的找到你的B版本-LIFT模型应用,具体可以点击跳转,这里不做过多讲解。
三、开始做广告计划的AB测试
1、Adsdesk搭建广告计划AB测试
2、分析AB测试数据
(上述数据仅供参考,无实际意义)
tips:一般建议一个AB测试需要有足够的样本,建议运行7天以上(不考虑计划衰减等其他特殊情况),因为周一和周日人群可能会有很大的差距。
四、开始做落地页的ab测试
一般来说,一个广告计划由几方面组成,素材+定向+出价+落地页,前述内容介绍过了广告计划如何做AB测试,那么在落地页环节,也是不容忽视的,因为落地页往往是转化的关键步骤,如果落地页转化不佳,前面的AB测试与投放优化都是徒劳。
那么该如何去做落地页的AB测试?
1、对应的落地页集成Appadhoc AB测试工具代码(需要是自建站);
2、选定试验方案(确定变量);
3、按照试验方案进行appadhoc 试验模式选择,appadhoc提供3种试验模式,适用不同场景。
试验模式1:可视化编辑模式
特点:只需要集成一段JS代码即可实现不替换URL,替换落地页上的内容开展AB测试,比如替换某个图片与原版本对比(不需要叫技术大佬即可完成)。
重点:
① 不需要修改已经再投的URL;
② 不需要叫开发就可以自己完成A/B版本的创建与指标追踪。
试验模式2:多链接合并模式
特点:不替换URL,实现多个URL的页面同时存在于线上,用户访问URL-1,可以根据流量分配规则自动跳转到URL-2、URL-3。
实际应用场景:已经有了多个页面,页面已经设计好,都是为了同一产品的落地页,可以用多链接合并模式实现用户访问落地页,随机跳转到某个页面。在投放中不需要修改已经投放的URL。
重点:一个计划可以对应多个落地页,清晰明确知道到底那个转化最好。
试验模式3:编程模式
特点:只要能埋代码的地方都可以用编程模式开展试验,适用于复杂类型试验。
实际应用场景:落地页表单有多个项目填写,可以增加或者减少来提升用户填写表单数量。落地页有大的流程改变,模式改变,可以使用编程模式。
重点:适配任何能集成代码场景,需要前端技术介入。
分析试验数据:
五、其他方面拓展:
AdsDesk产品创立之初,就洞察到了投放团队在广告计划搭建过程中耗费了大量时间精力,那么为何不能通过智能创建来提高以往的创建效率呢?用以往1条广告计划创建的时间,批量搭建200条不重复的广告计划。
热云在洞察整个投放领域的工作时候发现,数据孤岛现象严重,媒体投放数据是一摊,后端转化归因数据是一摊,故热云将自己生态内的产品打通,实现投放全链路闭环,从用户点击这广告开始到他进入App产生的付费留存等全链路打通,并提供基于AB测试理念的Appadhoc A/B测试解决方案优化转化环节。
在AdsDesk解放了优化师的人力后,我们希望优化师专注于创意分析,素材分析,计划分析,所以我们也推出了,视频素材批量生产工具,加特林,就如产品名字一样,素材的输出速度由原来的步枪变成了无限火力的加特林,在一步提高优化师工作效率。
如今,热云不仅仅有上述的产品支撑营销全链路,还有更多的能力,比如基于云原生的Spotmax用云成本优化解决方案,Spotmax已经成功在热云数据自身成功应用帮助热云数据在2020年节省了千万级服务器成本,2021我们决定把它商业化为我们的用户提供更好的降本增效能力。
最后,附上一张热云数据全链路赋能营销的产品矩阵图。
今天文内介绍的产品均开放试用,立即申请试用,开始你的第一个AB测试!
附:产品清单
作者:祁永辉
热云数据增长顾问,擅长营销全链路解决方案,服务过多家国内外知名企业,落地过百余次AB测试试验方案。