文章对AB测试的方法做了一些分享和解读，来，发车！

如果有高人指点，只要你更改 App Store 商品详情页的一个图形元素，就能让应用转化率提高 66％，猜你二话不说就会去做！

可惜，这样的高人并不存在，但是这个例子只是为了说明： A / B测试对于应用在市场的表现情况至关重要！转化率每增加 1％，你的收益将增加 1％。这就是现实！

此时你们的的疑问应该是:“常年都在说 A / B 测试这个老梗，有没有具体的测试流程呢？”

今天的文章中，我们会向你详细介绍 A / B 测试的方法，看完之后你就没有任何借口不做 A / B 测试了哟！准备好了吗？开车！

Google Play 自带 A / B 测试功能，如果你的产品在这个平台发布，那做 A / B 测试就很方便。但如果你的应用发布于 iOS 平台，就要麻烦一些。

哪些内容需要测试？

这个问题的答案视不同情况而定，总结来说：观察 App Store 的商品详情页，最容易被忽略的内容则是最最需要测试的内容。假如你的 icon 设计得精致又特别，相比下来截图显得暗淡无趣，那你就可以先从截图入手，换一些效果同样醒目的截图，看看哪个效果更好。

根据 StoreMaven 的数据显示：视频、截图和图标是最影响转化率的几个因素。StoreMaven 对不同的因素做了一个影响力分析，请见下图：

在哪里查看转换率？

如果你的应用是在 Google Play 发布的，在“Acquisition Reports”标签下即可查看自然下载的转化数据。Google Play 可以显示基准数据，让你查看自己的 App 与同类应用表现的差距。

如你所见，如果你的应用转化在所属类别中的平均值之下，Google 会告诉你，你还有多少下载量的差距。

要查看 iOS 商店的转化率，请打开 “Analytics” 页面，然后点击“转化率”。 选择此选项后，图表将显示每日的转化率。

如果你想在 iOS 控制面板只看到自然用户的数据，请为“App Store Browse”或“App Store Search”设置过滤器，如下所示：

1. 肉眼观察法

这种方法勉强称之为 A / B 测试吧，但还是可以了解到哪些素材的表现更好。如果你期待看到很明显的转化率提升效果，建议不要依赖使用这种方法。

优点

• 免费
• 简单易上手，只需上传新素材，等待几周，然后比较前后的转换率

缺点

• 效果不准确，反弹严重
• 即便不做测试，转换率的波动每月也会高达50％，会误导测试假设

无发布前测试

你必须先发布产品，才能使用此测试方法。比较适合已经稳定的产品。

测试周期长

为了看到明显的效果，你必须留出足够长的时间来收集数据，少说两三周，多则一两月。

这种方法适用于哪种情况？

• 你的应用仅发布于 iOS 平台
• 没有付费广告的预算
• 没有网站的登录页面可以运行测试
• 你百分之百确定新的变化将提高转化率

2. Google Play 的 A / B 测试

如果你的App发布于 Google Play，可以使用这个方法。

在 Google 后台，你可以对图标、描述、功能图形，截图和促销视频等进行A / B测试。

设置 Google 测试很简单。打开 Google Play 信息中心，然后点击此处：

这里有两种测试类型：

全球范围：全球测试会向全球所有用户展示你的测试素材。比较适合不涉及文本（如图标）的元素，不会因为语言不通产生理解上的问题。

本地测试：仅针对目标语言的用户展示本地化测试。适合测试包括文本类（如标题）的元素，测试的人群会更精准。

设置好了测试项并开始运行，它应该是这样的：

测试开始后，你能做的就是等待。当测试达到90％的置信度时就会结束，你的数据就可用了。以下是 Google 关于如何在 Store Listing 中运行 A / B 测试的文档，可供您参考：

https://support.google.com/googleplay/android-developer/answer/6227309?hl=zh-Hans

优点

• 免费
• 数据准确。来自Google 官方的数据可靠度还是杠杠滴。当然，统计学意义和“90％置信区间”允许出现一些误差。
• 操作方便。只需要提交你需要测试的内容素材即可

缺点

• 仅适用于Google Play。希望苹果公司能够发布自己的 A / B 测试工具，但目前只是梦想
• 如果你在 Google Play 和 iOS 商店中都有应用，可以使用 Google Play 商店的 Store Listing 进行测试，然后将最好的结果应用于 iOS 商店

无发布前测试

你需要先发布的应用，再进行测试。

适合哪种情况

你的应用在Google Play上发布

3. 第三方测试软件

如果你手里有预算，我们建议你使用像 SplitMetrics，Storemaven 或 Test Nest 之类的第三方测试服务来模拟应用商店页面进行A / B 测试。根据我们的经验，他们给出的分析报告算是比较专业的。

你只需要创建测试活动，然后设置好变量，观察效果即可。

例如，你可以创建两个模拟应用页面，每个页面都有不同的图标。通过 Facebook 广告或其它任何流量来源，查看哪一个转化最好。用户点击模拟应用页面上的“安装”后，将被引导到产品的登录页，如果用户感兴趣，会在这里注册并留下自己的账户信息。

以下是 Illusion Labs 进行的一个实验，他们测试了 3 种不同图标的效果。

正如你所看到的，第一个版本的图标转换效果是最好的，这也是他们最后采用的图标。

优点

• 可以做预发布测试。在 App 正式发布之前就可以测试一些元素
• 允许一次测试更多的变量
• 支持使用像 AppsFlyer 这类归因链接来跟踪用户行为。比如用户下载之后的购买行为等

例如，也许变量 A 比变量B的转化高 10％，但 AppsFlyer 的数据显示，看到变量B比变量A的用户多消费了 20％。你会选哪个变量？当然是变量 B 啦！

缺点

• 费用支出不能少，运行测试所需软件的价格是每月   $149（TestNest）起
• 测试的过程中会有用户流失。当用户点击模拟应用页面上的“安装”时，他们并没有被直接跳转到真实的应用下载界面，而是需要两次或多次点击和跳转。在此过程中，就会有一部分用户流失

这种方法适合哪些情况？

• 多适用于 iOS 平台的应用
• 预发布 A / B 测试
• 有测试预算，并且同时开启付费广告活动

4. 付费广告素材测试

付费广告即 Facebook 广告或其它广告联盟提供的推广服务。如果你有投放广告的需求，那你就有对广告素材进行 A / B 测试的需求。

运作模式就是同时投放多组广告素材，直接使用 Facebook 广告来测试你的广告素材。看起来像这样：

Facebook 以外的其它广告联盟，也可以在广告中测试图标、描述或截图。

例如，如果使用 Chartboost，你可以测试这些：

以下是 Chartboost 的其他链接：通过社交元数据将你的移动广告转化率提升高达 15％。

优点

• 比第三方测试软件便宜
• 支持预发布测试
• 可以一次测试多个变量。

缺点

• 结果会有偏差。虽然这种方法可以帮助你了解最佳转化方式，但数据比起专业测试软件还是不够准确。这是因为广告与应用商店页面的展示效果不同，用户看到的内容也不同

这种方法适用于哪种情况？

• 多适用于 iOS 平台的应用
• 需要进行预发布测试的应用
• 有广告投放预算的应用

5. 登录页上的 A/B 测试

如果你的应用有一个独立的登录页，这里也可以用来测试不同的图形元素哦。

你可以使用 Optimizely 或 Google 优化等服务在登录页上直接对图标、截图、描述、标题甚至价格进行测试。比如下图这样：

优点

• 支持发布前测试
• 如果你已经设置了一个网站并开始运行，你需要做的就是安装 A / B 测试工具并运行测试

缺点

• 由于网站上的上下文与实际的应用商店页面不同，因此结果可能会有偏差
• 昂贵又耗时。至少要有一个可用的登录页，其次这个网站的流量还要大

这种方法适用于哪些情况？

• 多适用于 iOS 平台的应用
• 需要进行预发布 A / B 测试
• 有可用的登录页面，以及足够的流量可以运行 A / B 测试

6. 应用墙测试

如果你的品牌下有多个应用，那你可以在自己的另一个应用中设置一个应用墙，以交叉推广自己的不同应用。顺便，还可以再这里做做测试。

优点

• 免费。设置好了应用墙，所有当前用户都将免费为你做 A / B 测试！

缺点

• 由于环境与实际的应用商店页面不同，因此结果可能会偏差
• 根据你用户量的限制，测试需要的周期会被拉长

这种方法适用于什么情况？

你至少需要一个用户量还不错的同类应用

7. 社交媒体投票测试

你可以在 Facebook 小组、Subreddits 这些地方发起投票测试，甚至可以向朋友和家人展示变量。比如这样：

这里有一些可以发起发起投票的平台：

• Facebook – 应用企业家和营销组
• Reddit – 反馈请求示例
• Pickfu（付费）- 能为你提供变量的比较结果。只需 20 美元就可以获得 50 份投票

优点

• 便宜、易操作。将你的投票问卷发送给一群人即可。即使是付费投票，也会获得性价比很高的投票结果
• 可以获得投票者的反馈

缺点

• 准确度不高。通常情况下，他们可能会选择最漂亮或炫目的图标，但不见得就是转化率高的图标

这种方法适用于哪种情况？

• 多适用于 iOS 平台的应用
• 需要收集用户反馈

结论

现在无论你的产品在什么平台发布，你都没有理由不做 A / B 测试了。

最后一个建议是，你可以先从定性方法（如投票）开始测试，以确保方向正确。

如果你的应用尚未发布，你正在犹豫在图标和截图到底用哪一版。不妨来一波测试看看大家的选择是什么。

本文由 @ASO+ 原创发布于人人都是产品经理。未经许可，禁止转载。

题图来自PEXELS，基于CC0协议