3. 创建试验
创建试验
每当进行一次A/B测试时,您需要建立一个“试验”。试验包含原始的对照版本和您将要测试的试验版本,以及期望获得提升的关键数据指标。
首先需要明确您所需的试验方案,例如:
- 提出问题:为什么我的产品转化率不够高
- 建立假设:让“下一步”按钮更明显一些,也许转化率会更高
- 准备方案:不同的按钮设计图,按钮的点击次数和页面流量统计,需要多少流量来进行这个试验
- 验证这个假设:构建了一个“下一步”按钮更加明显的版本作为版本B,与原始版本A同时上线,展示给具有相同属性的两部分用户,并获得统计数据
- 分析数据得出初步结果:如果B版本成功提高了转化率,那么这个假设得到了验证。否则,需要返回第二步来做出其他假设
为保证最稳定的试验结果,建议您从较小流量开始进行,不要同时进行多个试验以免造成相互影响。如果您需要同时运行多个试验,AppAdhoc A/B Testing提供分层试验和互斥试验模式来保证结果不受干扰。详情参见流量分配。
AppAdhoc A/B Testing提供为不同的操作平台,提供可视化编辑试验、编程试验和多链接合并模式三种模式:
A. 可视化编辑试验
只要您的应用集成了SDK,就可以在平台上完全通过手动操作生成试验版本、设定优化指标,省去代码工作量,特别适合例如H5推广活动页等需要频繁进行调整的功能页面。目前支持的功能有:针对页面元素的文本、图片、超链接编辑和替换;文本格式更改;元素位置和颜色更改、设定统计元素等。
如果需要更加定制化的统计项,也可以设定编程模式的优化指标,即代码定义事件。
有关操作说明参见Web/H5可视化模式试验。
B. 编程模式试验
编程模式试验提供更多自定义的功能,需要在代码中进行编辑。
试验版本通过变量控制,例如您将对按钮的不同颜色进行试验时,需要在代码中定义变量BtnColor,之后在平台上填写每个试验版本对应的变量值即可。
之后,在应用中需要统计的地方集成优化指标。
有关设置参见Web/H5编程模式试验 Android编程模式试验 iOS编程模式试验 。
C. 多链接合并模式试验
多链接合并模式用来进行H5页面的试验。
当不同的设计方案差异很大,不适用可视化或编程模式时,或者已经拥有多个不同的页面,应使用多链接合并模式。
原始版本的链接将作为试验URL,当用户访问试验URL时,将会按照设定的流量比例进入到对应的试验版本中。
有关设置参见Web/H5多链接合并模式。
创建克隆试验
克隆试验将之前所创建过的试验版本进行克隆,可生成与被克隆的试验相同的试验版本和优化指标。
请注意,因克隆的试验与原试验具有强相关性,请勿同时运行,建议克隆后关闭原试验。否则将造成数据干扰。
创建克隆试验时填写克隆试验名称,并在该页面中选择克隆的试验所在层。
克隆后的新试验可进行再次编辑。