A / B测试Apple搜索广告素材
在您的应用商店列表上交换两个屏幕截图可以对转化产生多大影响？ 事实证明很多。
Apple搜索广告是（在撰写本文时）为您的应用商店列表执行A / B测试的最接近方法。 Apple搜索广告“创意集”可让您创建在应用商店搜索结果页面上为您的应用显示的三个屏幕截图的变体。 对于我的“您愿意”新闻馈送应用程序（场景游戏），我想测试一种理论，即用户更关心看到其他人如何投票赞成自己创建场景的能力。
在对照组（当前的应用商店列表）中，第三个屏幕截图提供了创建内容的好处。 在治疗组中，第三张屏幕截图的好处是可以看到世界其他地方的投票情况。 每个组中的前两个屏幕截图保持不变（您可以争辩说，这些屏幕截图中的消息传递也可以得到改进，但这是另一天的事情）。
结果
所以这是有趣的部分！
我从10月1日至11月20日（预算较低，约7周）进行了一次广告创意测试。 从搜索结果印象到产品页面的点击率在两组中完全相同 。 但是，从产品页面安装应用程序的治疗组中的人员转换率从55％增加到70％。
统计学意义
这些结果是否具有统计意义？ 我通过在线计算器运行了转换结果，结果确实非常重要。 在该实验中，治疗组的转化率比对照组高28％。
我们可以从结果中得出什么？
搜索广告有点奇怪，因为对于处理组，产品页面无法反映广告列表中实施的更改，因此，当我们将更改应用于应用商店时，无法保证相同的行为。
如果是这样，那么我们也许可以推断出，用户确实确实更在意学习他人如何投票而不是创建自己的方案。 查看我的分析事件肯定会证实这一假设（即与其他应用参与事件相比，内容创建率非常低）。
无论如何，我决定更新我的应用商店列表以交换屏幕截图，并将继续监视结果。
注意事项
- 该测试未在产品页面上反映出相同的更改
如上所述，对治疗广告搜索结果的更改不会更改产品页面上的屏幕截图的顺序。 他们将在治疗组和对照组中显示相同的默认顺序。
现在您可能会说治疗组的转换效果更好，因为这些用户在查看搜索结果和产品页面之间可能会看到更多的好处，但实际上，用户只能看到产品页面上的前两个屏幕截图，直到他们向右滚动。
我认为大多数用户已经从搜索列表中决定了他们的想法，并且不会滚动浏览图像。 当我在该应用商店上启动应用程序时，我将通过Google Play商店A / B测试进一步测试该理论。
2.对产品页面的点击率可疑
我真的以为截图的更改会同样影响产品页面的点击率和安装率。 两组产品页面的点击率相同的事实意味着该产品页面上的某些内容可能影响了安装。 因此，我要重申的是，治疗组产品页面上更多不同的屏幕截图/优点在转化中发挥了作用？
3.图像背景图案可能影响了安装？
要成为一个真正公正的测试，我应该使用相同的图像，然后进行副本更改。 我可能会在以后的测试中再次提到这一点。
无论如何，我称之为成功。 将来，我将在其他A / B测试上写更多博客，因此，如果您有兴趣，请确保订阅。