手动实验是您基于自行设定的条件和时间表而定义的实验。借助此类实验,您可使用一定比例的广告资源网实际流量来测试应用这些设置会对收入产生怎样的影响。当您运行某个实验时,该实验会显示在“实验”页面上。
若要查看所有可用的手动实验类型及您正在进行的实验的列表,请依次点击优化 实验。
您可以通过以下两种方式接收有关实验的通知:
- 通过电子邮件:依次点击优化 实验 订阅最新动态电子邮件。
- 更新通知设置:依次点击“通知”图标 “设置”图标 实验通知。
概览
若要运行手动实验,请执行以下操作:
- 选择要使用的实验类型和条件。
- 定义实验轮次,并确保该实验轮次的持续运行时间达到指定的时长。
- 修改自动暂停实验的条件,或者为实验停用自动暂停功能。
- 将您为“变体”组分配的展示流量与为“对照”组分配的流量进行比较,看看哪部分流量在实验运行期间效果更好。
- 根据需要运行更多试验。
- 决定是否将实验设置应用到您的 Ad Manager 广告资源网。
运行实验
若要运行手动实验,请完成以下步骤。
注意:不同实验类型的步骤略有不同。如需了解详情,请参阅下文的选择手动实验类型。
- 登录 Google Ad Manager。
- 依次点击优化 实验。
- 在要使用的实验类型所对应的卡片中,点击新建实验。
- 为该实验命名,以便您能够更轻松地查阅结果。
- 输入您的实验类型所特有的设置。
- 在“实验期”下,设置实验轮次的开始日期和结束日期。
- 开始日期:每个实验轮次需要运行至少 7 天,以提高得出结论的几率。您可以安排实验轮次立即启动,也可以选择一个稍晚的日期。所有实验轮次都将根据排定的日期于零点启动并于晚上 11:59 结束(以您的当地时区为准)。数据每天都会刷新。如果您将开始日期设为当天,该实验轮次将会在接下来的一个小时内开始。
- 结束日期:每个实验轮次的运行总时长不得超过 31 天。当实验轮次结束后,您可查看结果,以决定是要将其作为优化建议付诸应用、再运行一个实验轮次,还是结束实验并保留原设置。
- 在“流量分配”下方,设置要向实验分配的展示流量百分比。
- 在“自动暂停实验”下,设置最多 10 个自动暂停条件,并可为每个条件选择累计或每日:
- 累计:在实验轮次期间将暂停实验的收入损失数额。
- 每日:只考虑过去一天的全天数据,在收入损失达到多大的数额后就会暂停实验。
注意:自动暂停功能会每天检查一次结果是否符合指定的条件。为确保实验有机会收集数据而不会被提前暂停,实验轮次不会在开始后的前 24 小时内暂停。为避免抽样错误,系统仅会根据具有显著统计意义的结果暂停实验轮次。例如,当 95% 置信区间的下限值达到必要的阈值时,系统将暂停实验轮次。
- 点击保存。
有关手动实验的最佳做法
有时,对您的设置应用更改(例如更改购买模式)可能会影响买方和其他市场参与者的行为方式。为确保能够从您运行的手动实验中获取最大收益,并了解它们对市场行为的潜在影响,我们推荐采用以下最佳做法。
利用实验轮次逐步推进实验
首先针对较低百分比的流量运行实验 - 这种做法的风险相对较小,但也不太可能会使其他市场参与者的行为发生变更。
待实验效果在较低百分比的流量分配比例下达到可接受的水平后,您便可在更高的流量分配比例下使用相同的设置启动下一个实验轮次,从而更深入地了解将您广告资源网的所有流量更新为这些设置会产生怎样的影响。这一点对于在定价方面做出的更改来说尤为重要,因为此类更改更有可能会吸引买方给予响应。
请务必注意,采用较低流量分配百分比的实验在改变市场行为方面可能不会产生足够显著的成效。随着流量分配百分比逐步提高,相应实验便有更大的几率改变市场行为以及衡量该行为变更的效果。
运行时间段更长的实验
请务必让实验运行足够长的时间段,以使市场行为发生变更并通过实验衡量这些变更的影响。行为变更通常需要 7 天或更长时间才能影响收入。
除了比较不同的设置之外,还要考虑总收入
实验设置可能既会影响变体组的行为,也会影响对照组的行为。您应该验证变体组中的预期收入是否与您对整个广告资源网的预期相符。
选择手动实验类型
您选择的实验类型将决定运行手动实验时使用的流量分配比例和条件。
如果您取消屏蔽类别,则会有更多广告客户和买方竞争您的广告资源,这有助于扩大您广告资源的覆盖面并最大限度地提高您的收入。
实验条件
- 保护措施:选择您要对此实验应用的保护措施。
- 取消屏蔽以下类别:选择要在实验期间取消屏蔽的类别。
- 实验期:可用的最早开始日期会显示在日期范围选择器中。已排定的实验将于所选日期开始。
- 流量分配:您希望在实验期间将百分之多少的估算展示次数分配给实验样式。剩余的展示次数会分配给原始样式。例如,如果您将 60% 的展示次数分配给实验样式,则原始样式会获得剩余的 40% 的展示次数。在分析实验结果时,请注意这一点。
通过统一定价规则实验,发布商可以运行手动实验来更改任意统一定价规则中的底价。您可以尝试提高或降低相应规则的底价并比较结果。
重叠的定价规则:统一定价规则实验会根据与相应规则的定位条件相符的所有广告请求评估效果,包括与其他定价选项中重叠的定位条件相关联的广告请求。这样一来,Ad Manager 便可以考虑定价更改,从而将剩余的展示次数和收入转至其他定价规则或定价选项。
显示的每千次展示费用是与定位条件相符的所有广告请求的平均值。这意味着,在某些统一定价规则实验中,如果与定位条件相符的大部分流量都不遵循您所选的定价选项,而只遵循出价更低的定价规则,那么每千次展示费用可能会低于底价。
- 定价规则 P1 定位到广告单元 XYZ,并设有 1 个定位到广告客户 A123 的子规则,且底价为 10 美元
- 定价规则 P2 定位到广告单元 XYZ,并对所有广告素材设置了一条底价为 2 美元的子规则
如果您针对 P1 运行实验,则报表显示的有效每千次展示费用可能会低于 10 美元,因为 10 美元底价仅在广告客户 A123 赢得竞价时适用。不过,我们会考虑存在广告单元 XYZ 的所有流量(根据第二条规则,底价将为 2 美元)。
实验条件
- 统一定价规则:选择用于确定运行此实验的流量的统一定价规则。
- 定价选项:选择要在此实验期间使用的定价选项。
- 实验价格:您要对变体组中的流量应用的价格。
- 受影响的补余订单项:参照原价更改实验底价后影响到的补余订单项的估算数量。
- 实验期:可用的最早开始日期会显示在日期范围选择器中。已排定的实验将于所选日期开始。
- 流量分配:您希望在实验期间将百分之多少的估算展示次数分配给实验样式。剩余的展示次数会分配给原始样式。例如,如果您将 60% 的展示次数分配给实验样式,则原始样式会获得剩余的 40% 的展示次数。在分析实验结果时,请注意这一点。
您想要与新设计进行对比测试的原始样式称为“对照”样式。新设计称为“实验”样式。您应更新实验设置,以提升实验样式相对于对照样式的效果。然后,您可以分析这两个样式的效果并确定想要保留的设置。
原生样式实验功能在现有的原生广告展示位置上只能比较两种原生样式。您不能比较同一个广告展示位置中的横幅广告和原生广告。
实验条件
- 原生样式:选择符合格式和交易资格要求(您要据以运行实验)的原生样式。
- 实验期:可用的最早开始日期将显示在日期范围选择器中。已排定的实验将于所选日期开始。
- 流量分配:您希望在实验期间将百分之多少的估算展示次数分配给实验样式。剩余的展示次数将会分配给原始样式。例如,如果您将 60% 的展示次数分配给实验样式,则原始样式将会获得剩余的 40% 的展示次数。在分析实验结果时,请注意这一点。
- 添加定位条件:为实验选择定位条件。此定位条件必须与订单项定位条件匹配,才能成功投放原生广告。
您可以测试新的广告格式,以了解它们会对您的广告资源产生怎样的影响。目前,网站插页式广告和锚定广告这两种格式可供测试。
实验期间,系统会从所有符合定位条件的网页加载事件中选择一定百分比的事件,并自动将实验性广告单元以无代码广告单元的形式添加到这些事件。该广告单元会加载实验性格式。
实验结束时,点击应用,自动将相关更改以无代码广告单元的形式应用于您的网站。无需重新植入代码。
实验条件
- 格式:选择运行实验的格式。
- 实验性广告单元:选择所需广告单元,将其用于投放广告并从报表中了解其实验效果。请注意,此类广告单元不会用于定位,也就是说,系统会将该格式投放到与实验定位条件匹配的任何请求。建议您设置一个新的广告单元。
- 目标:指定您想在什么位置运行实验。
- 实验期:可用的最早开始日期会显示在日期范围选择器中。已排定的实验将于所选日期开始。
- 流量分配:您希望在实验期间将百分之多少的估算展示次数分配给实验网站插页式广告。其余展示次数分配给其他广告。例如,如果您将 60% 的展示次数分配给实验网站插页式广告,那么其他广告将获得剩余的 40%。在分析实验结果时,请注意这一点。
实验条件
- 收益组设置:选择要在实验中使用的收益组。您必须先将收益组设为“无效”,然后才能在实验中使用它(启用实验即可运行它)。用在实验中时,收益组的状态会被标记为“实验进行中”。当您通过应用或拒绝实验而结束实验时,收益组的状态会相应地更改为“有效”或“无效”。
- 实验期:可用的最早开始日期会显示在日期范围选择器中。已排定的实验将于所选日期开始。
- 流量分配:您希望在实验期间为收益组分配的展示次数所占的百分比。只有收益组定位的展示次数会受到影响。其余填充的展示则不受收益组影响。例如,如果您将 60% 的展示次数分配给实验组,则剩余 40% 将不受影响。在分析实验结果时,请注意这一点。