A/B测试
Last updated
Was this helpful?
Last updated
Was this helpful?
通过快速实验和数据，验证假设，然后推广，增长的重要手段之一就是实验。
下面按使用场景介绍弹窗的高级功能：A/B测试
分群对比：不同分群对相同弹窗内容的投放对比。
控制组对比：同一个分群中收到与未收到弹窗内容的效果对比。
单击添加分群/控制组对比，选择添加分群对比。
添加效果如下图：
单击添加分群/控制组对比，选择添加控制组对比。
添加效果如下图：
您可以自定义实验组占当前分群的百分比数，只有分配到实验组的用户会收到弹窗，控制组的用户不会收到（只作为对比人群）。要对比的数据取决于您设置的转化目标，比如可以对比两组人的 留存，活跃，成交情况等等。
对比同一分群用户，投放不同素材的投放效果对比。
在配置触发和素材时，单击添加素材对比。
支持上传两种素材，自动成为实验A组和实验B组，所选择的目标分群用户触发了相应的条件后，会随机展示（各50%概率）其中一个素材。
对比在同一分群，相同投放素材，不同活动（转跳页面）的投放对比。
单击添加活动对比。
A/B弹窗编辑上线后，该组弹窗将会出现在弹窗列表的 「实验弹窗」Tab下，可以点击列表中的弹窗名称，进入到数据报告页，查看到详细数据。对于已上线的A/B弹窗可以在列表页看到两组的数据对比情况（展示、点击和点击率）。
以下是不同对比场景详细的数据报表页：
在测试过程中，可以密切关注弹窗的点击以及活动的效果数据，及时调整活动页。如果达到的预期的效果，可以点击推广该实验，会对该分群全量的发送弹窗（之前收到过的用户不会再收到）。
如果不设置转化目标，默认给出两组实验的点击数据，展示数据，方便的进行对比。
如果设置了转化目标，可以对比两个弹窗的转化率。比如 想引导用户去活动详情页，点击某元素参加活动，可以设置该元素的点击事件作为 转化目标。
支持对实验进行迭代，比如经过初步对比，发现实验A组的数据较好，但还没有达到理想的转化效果，此时可以修改实验，通过更改实验 B 的素材，继续进行对比，修改后上线，将会自动成为 实验版本2（实验版本1的数据也将保留），实验B的标示变为B2。
我们会在实验弹窗的名称后加上实验版本，如「新人大礼包-实验组A1」、「新人大礼包-实验组B1」，如果您需要在其他分析工具中使用，请在输入弹窗名称时，加上实验的版本号。如下图所示：
