Android可视化试验过程

在这部分中,我们以通过改变按钮颜色,预期提升按钮点击率为例,来说明如何使用移动端可视化编辑器。先通过一张简单的流程图了解所需的步骤,再一步步进行具体操作:

具体操作

1 试验方案

一个完整的A/B 测试需要根据目前已有的用户数据进行分析判断,推断并建立假设,才能针对性的做出改变和调整,根据具体需求,构建产品A/B 测试的需求文档,即明确本次试验的几个要素。

在本次示例中,设计试验版本为醒目的蓝色按钮,对照组为原始的灰色按钮,优化指标为按钮的点击次数。

2 新建试验

在试验开始前,请确保应用已经正确集成SDK,集成方法参考集成文档。在可视化模式中,引入SDK并初始化后,即可连接到编辑器。

进入您的应用界面,此处示例为[AppAdhocAndroid页面DEMO],选择 新建试验
如图所示,要进入编辑器,请先在您的调试设备上安装AdhocTester

具体操作

为了方便寻找,可以将此次测试的内容设置为试验名称。

选择分层:您可以为每一个新创建的试验设置所在层,在同一层的试验流量互斥,可以保证试验互不干扰。如果两个试验在不同层,那么流量可能会重叠,同一个用户可能会同时进入不同层的多个试验。如果选择分层,请自行确保试验内容互不干扰。详情参考分层流量

在进行下一步之前,请确保您的APP已经集成SDK并初始化。参考集成文档

3 试验版本

点击下一步进入编辑器界面,按照提示在手机上进行操作:打开AdhocTester,选择编辑试验版本,然后打开您的应用,即可连接编辑器。

请注意,为避免冲突,同一应用下,任意时刻只能有一台设备连接到编辑器。如果收到错误提示,请检查是否多开了编辑器页面,或者是否有其他人也在连接到编辑器。

AppAdhoc A/B Testing已自动创建试验版本一,通过左上角切换可看到需测试页面的原始版本。

在编辑器中,选择您需要编辑的元素,然后根据菜单展示功能进行操作即可。在界面右侧编辑需要的内容,界面左侧为操作记录,可以任意撤销所做的操作。如果有些元素难以选中,您可以切换到组件树界面,直接选择您的目标组件。

具体操作

以本次案例为例,将按钮颜色改为了较为醒目的蓝色。

操作完成后记得点击保存按钮,如果不保存退出编辑器将会丢失所做的操作。

4 优化指标

退出编辑器后,您可以找到优化指标表格,查看并管理已添加的指标

使用步骤

  • 点击「跟踪元素点击」,进入可视化编辑器添加优化指标。
  • 点击「添加编程指标」,可直接绑定编程优化指标,请注意在代码中集成,并保证指标名称一致。
  • 新建优化指标,请注意命名格式,以英文字母开头,可以使用数字和下划线。
  • 已创建过的优化指标将会保留,在其他试验中可以直接选择已有优化指标添加,如果是编程指标,代码无需更改。

(1)追踪元素点击
如果只需要知道某个元素的点击次数,可以在编辑器中选中元素,然后在界面左侧切换到优化指标栏,关联指定的优化指标即可。

创建按钮点击次数为新的优化指标BtnClick,命名支持英文、数字和下划线。

使用步骤

(2)编程指标
有时想要统计的数据不是单纯的点击事件,而是“支付成功”这类需要逻辑判断的事件,您需要通过代码来定义事件并上报。
选择添加编程指标,填写指标名称和说明,之后在代码中触发事件的地方集成代码,其中"event_name"需要替换为您的优化指标名称:

AdhocTracker.incrementStat(this,"event_name", 1);

有关优化指标的集成详情参考集成说明

有关复合指标的说明请参考此处

5 集成调试

确认试验版本和优化指标内容无误,点击完成创建,将会跳转到集成调试界面,可以在此界面预览集成效果。

启动AdhocTester,选择[扫描加入试验],然后扫对应版本的二维码,在收到扫描成功的提示后,再次打开您的APP,即可预览到对应的版本。

使用步骤

操作后,也会获取到对应的指标数据,可以在此界面中预览。调试数据不会影响到真实试验数据。

使用步骤

请注意,扫码加入版本后,设备将会停留在对应的调试版本。如果想要恢复设备正常加入试验,可通过AdhocTester选择退出版本即可。

6 调整流量

点击完成调试,将会跳转到运行控制界面。在此界面中您可以调整试验流量、运行或结束试验。

请为此次试验分配流量,访问到链接的用户将会按照您设定的百分比看到所展现的页面。未参与到试验中的用户将会看到原始页面,并且不会上报数据。
即使是试验开始运行后,也可以调整流量,所做的调整将会即刻生效。
请注意100%的流量不代表所有用户都会参与试验,以及在同一层中,某试验占用的流量不能再被分配到其他试验中。 有关流量的详细说明请参考流量分配

使用步骤

7 运行试验

恭喜!现在可以开始运行您的A/BTesting方案了,记得关注试验数据,以便及时调整流量,做出应对策略。有关数据分析请参考此处

results matching ""

    No results matching ""