在合作伙伴中心中管理实验

在合作伙伴中心 定义实验,并为试验 编写应用程序代码后,即可激活实验,并使用合作伙伴中心查看实验结果。 获取所需的所有数据后,可以结束试验,并选择是继续使用所有应用的控件变体中的变量值,还是切换到使用其他变体中的变量值。

注释

激活试验时,合作伙伴中心会立即开始从任何已检测的应用收集数据,以记录试验的数据。 但是,试验数据可能需要几个小时才能显示在合作伙伴中心。

有关演示创建和运行试验的端到端过程的演练,请参阅 使用 A/B 测试创建和运行第一个试验。

激活试验

如果对合作伙伴中心中的试验参数感到满意,并且已更新应用代码,则可以激活试验,以便开始从应用收集实验数据。 当试验处于活动状态时,你的应用可以检索变体值,并将视图和转换事件报告到合作伙伴中心。

  1. 登录到合作伙伴中心
  2. 应用程序下,选择包含要激活的试验的应用程序。
  3. 在导航窗格中,选择 服务,然后选择 试验
  4. Projects 部分的项目表中,展开包含您实验的项目,然后执行下列操作之一:
  • 单击 激活 实验的链接。 您的实验已添加到页面顶部附近的 活跃实验 部分。
  • 单击试验名称,滚动到试验页底部,然后单击 激活

重要

激活试验后,除非在创建试验时单击“可编辑实验”复选框,否则无法再修改试验参数。 建议在激活试验之前在应用中对试验进行编码。

查看实验的结果

  1. 在合作伙伴中心,返回到你的应用的 实验 页面。
  2. 活动试验 部分中,单击活动试验的名称转到试验页。
  3. 对于活动或已完成的试验,本页的前两个部分提供试验的结果:
  • 结果摘要 部分列出了每个变体的试验目标和转换率百分比。
  • 结果详细信息 部分提供了试验中所有目标的每个变体的更多详细信息,包括浏览、转化、唯一用户数、转化率、增量 %、置信度和显著性。 置信度 是估计可靠性的统计度量值,用于计算误差边距。 显著性 是基于样本大小的统计测量,用于评估结果不是由于偶然,而是可以归因于特定原因的概率。

注释

合作伙伴中心仅报告 24 小时内每个用户的第一个转换事件。 如果用户在 24 小时内在应用中触发多个转换事件,则仅报告第一个转换事件。 这有助于防止具有许多转换事件的单个用户扭曲示例用户组的试验结果。

完成试验

  1. 在合作伙伴中心,返回到试验页。 有关说明,请参阅上一部分。
  2. 结果摘要 部分中,执行下列操作之一:
  • 如果要结束试验并继续在应用中的控件变体中使用变量值,请单击 “保留”。
  • 如果您想结束实验,但在您的应用中切换到使用不同变体中的变量值,请单击您想切换到的变体下的 切换
  1. 单击“确定” 以确认要结束试验。