A/B 测试

1. 在 Helium 上进行 A/B 测试有一些应用场景。
   i. 当您开始使用 Helium 时，可以利用 A/B 测试来检验混合盈利模式（头部竞价加瀑布流）与纯瀑布流盈利模式相比较的效果。
   ii. 即使使用 Helium 一段时间后，如果您想在聚合平台里测试一个新的广告网络，或者测试不同的 line item 设置，您仍然可以使用 A/B 测试。‍
   ‍
2. A/B 测试可以在每个 Helium Placement 层级上进行。您需要确保已经为这些 Helium Placement 广告位设置了基本的头部竞价和瀑布流模式。‍
   ‍
3. 对于测试混合模式（头部竞价与瀑布流）与单独瀑布流模式的初始应用场景，以下是在 Helium 后台设置 A/B 测试的流程：
   i. 在 Helium Placement 设置上，您已完成所有头部竞价网络（包括 Chartboost、Meta Audience Network、AdColony、Tapjoy）的设置。同时，您也已完成瀑布流模式的设置（包括广告组和 Line items）。
   ii. 在 Placement 设置页面的高级设置标签栏，开启  A/B 测试.
   iii. Helium 后台会自动创建 A/B 测试的设置界面。
   iV. 广告组 A 默认设定为当前的头部竞价与瀑布流混合模式，应用在当前 Helium placement 广告位上。
   V. 广告组 B 是将现有设定复制一份，然后您可以关闭所有的头部竞价网络，然后添加额外的  line items (包括 Meta Audience Network, AdColony, Tapjoy 等) 到广告组 B 里。‍
   ‍
4. Helium 自动分配 50% 广告请求给广告组 A，另外 50% 给广告组 B。i. 每个终端用户会被随机分配到广告组 A 或者 B，然后该用户后续的广告请求会被固定到这个广告组里，以此确保 A/B 测试的效果。‍
   ‍
5. 您可以在 Helium 后台的 Analytics > A/B tests. 查看 A/B 测试的结果。
   ‍‍‍
6. 如果在查看 A/B 测试分析后，您发现其中一个广告组的表现更好，您可以通过在 Helium Placement 中禁用表现较差的广告组来停止 A/B 测试。i. 一旦某个广告组被禁用，该广告组所有广告请求将自动开始转向另一个开启状态的广告组。ii. 您不能同时禁用两个广告组，至少有一个必须是开启状态。‍
   ‍
7. 如果您希望再次启用 A/B 测试，您可以直接编辑头部竞价或者瀑布流设定，将已禁用的广告组重新开启。

‍