iOS 15【A/B测试】设置全流程请收好

距离iOS 15的正式上线已时隔五个月,大家的设备都更新iOS15了吗?今年1月,苹果公布iOS 15 的安装率为72% — iOS 15以及成为市场主力。是时候针对iOS 15进行新一轮的额ASO优化了。

前期,我们介绍了iOS 15的七大利好,其中最重要的一项便是在运行A/B 测试。去年,Apple推出了更新后的审核提交方式,包括针对App、App内活动、自定义产品页面、产品页面优化测试进行的提交。好消息是2022年1月25日起,所有App Store Connect后台将全面适配【App内活动】、【自定产品页】、【产品页优化(A/B测试)】功能,开发者可直接在后台创建并提交相关活动/测试。

您是不是已经跃跃欲试开启A/B测试以提高下载转化率?本文将全面介绍iOS 15的【产品页优化(A/B测试)】功能以及手把手教您如何在App Store成功开启第一个A/B测试。

什么是iOS 15的【产品页优化】功能?

苹果于2021 年 7 月 7 日在Apple 全球开发者大会上首次公布【产品页优化(Product Page Optimization)】。 它允许开发者比较 App Store 产品页上不同的 App 图标、截屏和 App 预览,从而了解哪些元素带来的用户参与度最高

除了原始产品页以外,您可以测试最多三个其他产品页版本,每次测试最长运行时间为90天。

在 iOS 15 和 iPadOS 15 或更高版本上,您的产品页的备选版本 (称为“备选方案”) 会向随机选择的一定比例的用户进行展示。在您的测试期间,看到特定备选方案的用户将在整个 App Store 中看到相同的备选方案。如果用户从具有备选 App 图标的备选方案中下载了您的 App,该图标也会显示在他们的设备上。与您的原始产品页一样,您的备选方案中的元数据可以出现在“Today”、“游戏”和“App”标签页中,也可以出现在搜索结果中。

通过 App Store Connect 中的“App 分析”,您可以了解测试效果对于每种备选方案,“App 分析”都会显示展示次数、转化率、提升百分比和置信度,并与您选择的基准相对比。默认情况下,基准是您的原始产品页。如果您的测试包括多个备选方案,您可以通过随时更改基准来比较它们的效果。

产品页优化

如何配置和启动您的第一个A/B测试?

步骤 #1. 在 App Store Connect 左侧边栏中的“功能”下,点按“产品页优化”。

步骤 #2. 如果这是您第一次创建测试,请点按“创建测试”。若已创建过测试,您可以直接点按“产品页优化”旁边的添加按钮(+)。

创建测试

步骤 #3. 输入参考名称。对您的测试命名,最多使用 64 个字符。最好包含具体的描述,这样您就可以在“App 分析”中查看结果时轻松识别您的测试。

步骤 #4. 选择您要创建的测试方案数量。每次测试最多可以设置三个变体。请注意,在测试中添加的变体越多,得出结论性结果所需的时间就越长。

选择您要创建的测试方案数量

步骤 #5. 选择流量比例,即 App Store 应随机向多少比例的用户显示测试变体,而非显示原始产品页。例如,在一次测试中有三个测试方案,您选择了 75% 的流量比例,则所有访问您 App 产品页的用户中会有 75% 看到测试变体,而每个变体将各分得 25% 的流量。如果您的应用流量比较小,请尽可能减少测试方案数量,以便能尽快得出测试结果。

步骤 #6. 选择本次测试涉及的本地化语言。此项默认选中您 App 支持的所有语言。对于您未在测试中包含的语言,该语言的 App Store 将不会显示产品页的测试方案。请确保每种语言仅运行仅运行一个测试。如果您针对多个语言环境进行测试,您将无法在最后的报告中区分它们的表现。

选择本地化语言

步骤 #7. 您还可以点按“估计测试时长”旁边的箭头,然后选择产品页转化率的提升目标,即可查看实现此目标预计所需的时长和展示次数。这两个值基于 App 当前的表现数据(例如每日展示次数和新增下载量)估算得出,仅供参考,不会影响测试。测试的默认时长为 90 天,但您也可以选择提前终止测试。有时90天并不足以得出测试结论。如果估算天数超过 90 天,您可能需要更改您的标准,例如,创建更少的备选方案或增加流量分配

估计测试时长

步骤 #8. 点击“创建测试”。创建测试时,系统会自动复制原始产品页的元数据。您可以编辑测试方案中的 App 图标、截屏和预览。对于您未作更改的内容,系统默认使用原始产品页中相应的素材。在创建测试的过程中,请记住迭代测试的重要性。您应该限制一次更改的元素数量,以便您可以轻松识别影响转化率的因素。

编辑测试方案

步骤 #9. 发布测试。在发布您的测试之前,您的测试方案中包含的任何新元数据都必须经过 App Review 的审核

  • 只包含备选截屏和 App 预览的测试方案可以单独提交审核,而无需提交新的 App 版本。
  • 如果您只是更改当前已发布至 App Store 的截屏或预览的顺序,或者只更换 App 图标,则您无需重新提交审核,因为这些元数据此前已通过审核。
  • 要测试任何备选 App 图标,您的图标的所有变体都必须包含在您发布的 App 的二进制文件中,并且必须使用 Xcode 13 或更高版本构建。

步骤 #10. 查看数据分析。您可以在测试开始后的第二天查看效果指标。在“App 分析”中,您可以看到每个版本的展示次数、转化率、提升百分比和置信度。

查看数据分析

步骤 #11. 应用测试方案

如果您的某一个测试版本能显著提高转化率,则您可以点击“将处理方案应用至原始产品页”。

您可以随时将一个测试方案应用到您 App 当前在 App Store 上的产品页,也可以应用到处于“可供销售”或“准备提交”状态的 App 版本。每次测试中可以应用一个测试方案,且应用后无法撤销。请注意,您选择应用处理方案后,只有该方案中的 App 预览和截屏会被应用到产品页。如需应用处理方案中的 App 图标,请在下一个 App 版本中将该图标设置为默认图标。

iOS 产品页优化(A/B测试)与 Google Play 实验有何不同? 

苹果的的产品页优化与 Google Play的商品详情实验之间存在一些差异,主要有以下几点:

1. 测试内容不同

在App Store中,您仅可以测试应用图标,截图以及视频3种元素,而Google Play还允许您测试简短描述、详细描述以及置顶大图。

2. 同时可进行的测试数量不同

目前,您在App Store中一次只能运行一个测试,而在Google Play中,一次最多可同时运行5个测试 (加上自定义页面的测试则最多可达到10个)。

3. 测试流程不同

在App Store中,用于测试的新素材需要通过苹果的审核; 而在 Google Play 中,您可以立即运行测试。

4. 置信度不同

在App Store中进行测试,至少有90%的置信度才能给出至少有一种测试方案的效果优于或劣于基准,且实际上,随着时间的推移,您可以等待直到置信度达到95%以上;而在Google Play中,给出的置信度就是90%,您永远无法知道随着时间的推移置信度是否有所提高。而90%的置信度是远远不够的。

Apple 使用贝叶斯统计方法,您可以在此处了解他们的研究。而目前,Google Play尚未公开其在测试中使用的分流机制及统计方法。

最后

作为营销人员,当听说可以在App Store进行原生的A/B测试时,可以说是“欢天喜地”。如今,这一“梦想”已最终成为现实。那么,还等什么呢?按照本文介绍的步骤及注意事项启动您的第一个A/B测试吧!希望在不断的测试中,下载转化率蹭蹭上涨。

如果您有任何疑问,也欢迎通过邮件与我联系探讨。

Leave a Comment

您的电子邮箱地址不会被公开。

error: Content is protected !!