1. 功能概述
A/B测试是一种对比测试,将用户按比例分为对照组和测试组并对不同的组使用不同的配置。您可以通过不同的测试组使用不同的广告策略对比结果,来帮助您验证哪种广告策略效果更好。
HyperBid Tools A/B测试支持以下功能:
(1)支持流量分组维度A/B测试
(2) A/B测试结束后可以一键选择最优测试分组。
(3)可以查看A/B测试的分组数据及历史高级设置情况。
2. 操作指引
2.1 添加A/B测试
2.1.1 创建A/B测试
(1) 您可以通过【管理】- 【 A/B测试 】创建并管理A/B测试。

(2) 选择您准备进行A/B测试的应用和聚合单元

(3) A/B测试的生效时间可以选择立即或指定时间。
若选择立即生效,建议在保存AB测试之后立即完善AB测试下的聚合单元配置
(4) A/B测试创建完成之后,原有的聚合单元的配置将自动同步到A/B测试中最小ID的分组(如配置了A\B\C三组,将自动复制到A组)。 其他分组(B/C)如果要同步原有聚合单元的配置可以使用复制现有配置。
2.1.2 完成A/B测试分组的相关配置
A/B测试创建完毕后,会自动跳转到为各个A/B测试分组配置广告单元页面,可以在此页面中完成对于广告单元的配置

创建A/B测试成功后,也可以在【应用管理】-【 聚合单元 】为各个A/B测试分组配置广告单元。
2.2 查看A/B测试列表和A/B测试数据
进入【管理】-【A/B测试】页面,可以看到所有创建过的A/B测试。选择需要查看的A/B测试,可以查看到当前A/B测试不同分组的对比数据。


A/B测试支持数据指标:
-
预估收益
-
预估收益/切量设备
-
预估收益/展示设备
-
切量设备
-
展示设备
-
切量渗透率
-
展示/展示设备
-
展示/切量设备
-
聚合单元请求
-
聚合单元填充率
-
展示
-
展示率
-
预估eCPM
-
点击
-
点击率
-
查询isReady
-
isReady 成功率
-
填充耗时
2.3 结束A/B测试
结束A/B测试时,您可以选择最优分组策略。结束测试后,默认下发最优分组策略。

针对已结束的A/B测试,可以点击【历史设置】,查看A/B测试下不同分组的高级设置情况。
注意,历史设置仅记录结束A/B测试前一刻各个分组的高级设置情况。
3. 常见问题
(1) A/B测试功能如何分配设备?
AB策略不变的话,设备ID会被固定分配到其中一个组。若是策略改变,比如修改切量权限,那么设备ID会重新分配。