AB测试使用手册
AB 实验方法同时满足了低风险,抗干扰和量化结果的要求,因此不论在互联网产品研发还是科学研究中,都被广泛使用;国内包括阿里、腾讯、头条,国外包括 Google、Facebook、Airbnb 等产品,在多种业务和用户场景中,都应用ab测试,从而得到效果更优的策略,获得更高的收益。
友盟+ AB产品 网址:ab.umeng.com
产品介绍

应用场景
产品优势
接入方法
第一步 注册友盟+账号/使用已有友盟+账号
进入友盟+工作台,注册友盟+账号:https://workbench.umeng.com
第二步 创建应用,接入相关SDK
移动端接入
统计产品SDK
远程配置SDK
Android:SDK集成流程
iOS:SDK集成流程
小程序接入
下载小程序SDK
集成小程序SDK
微信小程序:微信小程序SDK集成
微信小游戏:微信小游戏SDK集成
集成小程序远程配置SDK
使用方法
开始一个实验
1.访问云配置 cc.umeng.com
2.选择进行测试的应用
3.创建AB所用的配置参数
创建实验所用的流量分层
1.返回ab.umeng.com
2.进入流量分层管理,创建实验流量
创建实验
1.点击实验管理,创建实验,填写实验基本信息
2.选择实验用户
3.编辑实验方案
4.设置实验目标
5.发布上线
查看实验报告
实验状态说明
AB测试总共有三种运行状态:未启动、进行中和已停止
未启动
未启动表示您只是创建了实验方案,或是设置了定时启动,但当前并未到启动时间,实验未启动。您可以立即启动该实验,实验就会开始运行了。
运行中
已找到领先方案:当前AB实验已经有一个备选方案的核心指标表现明显优于基准方案。但是建议您仍然继续进行实验,因为随着实验推进有更多数据到达,最终结果可能会改变,此时停止实验可能会得到错误结果,所以建议等待实验停止。
等待数据到达:当前实验正在进行中,实验数据还未到达,所以暂时未找到明显领先的实验方案,建议您再等待一段时间。
正在寻找领先方案:这说明当前实验数据已到达,但是还在计算。
暂时未找到明显领先的实验方案,请您继续等待实验直到实验停止,不要提前结束实验。
已停止
已找到领先实验:实验成功,备选方案核心指标的表现明显强于基准方案。
实验数据不足:因数据不足,此实验无法找到明显领先的方案。建议您重新建一个实验,并且扩大用户流量,这样可以增加更多的实验数据。
实验数据未到达:实验在实验数据到达之前被停止了,您可以重新创建实验继续寻找领先方案。