如何查看营销活动的 A/B 测试结果
你将会学到
了解您可以在 A/B 测试结果页面上找到哪些数据以及每个指标的含义。本指南中的信息适用于电子邮件营销活动 和短信营销活动 的 A/B 测试。 A/B 测试活动可以让您轻松确定对发送策略进行哪些更改，从而深入了解您的受众。您不仅会了解 A/B 测试的获胜变量，还会了解其他重要因素，例如获胜置信度百分比和获胜指标详细信息。
A/B 测试结果
要查看 A/B 测试的结果：
- 导航至您正在测试的营销活动。
- 选择主活动报告的A/B 测试结果 选项卡。
测试概述
在 测试结果 部分，您将看到包含以下内容的快照：
- 获胜变体
测试完成后，该变体获胜。 – 状态 A/B 测试是否正在进行（即收集分析）或已完成。 – 获胜概率 考虑随机机会后，获胜变体真正具有最高打开率、点击率或下单率的可能性有多大，以及该概率是否被认为具有统计显着性。 – 电梯 获胜的变体比其他变体表现得好多少。根据获胜指标（即打开率、点击率或下单率）计算。对于具有 3 个以上变体的测试，将使用表现第二好的测试进行比较。 – 获胜指标 用于测试的指标的获胜变体的结果。例如，如果选择打开率作为获胜指标，则会显示打开率百分比。在这些结果下方，您可以查看测试中每个变体的打开订单率、点击率和下单率。
升力如何计算
提升百分比与获胜变体显示的百分比不同。这是因为每个变体旁边显示的百分比是与电子邮件进行交互（打开、单击、下订单）的人的百分比，而提升则是获胜者相对于其他变体的改进百分比。例如，如果您使用点击率作为获胜指标，并且变体 A 有 5/100 (5%) 收件人点击，变体 B 有 4/100 (4%) 收件人点击，则变体之间的差异为 1 个点击。这意味着提升量为 1/5 (20%)。换句话说，提升率为 20%，其中变体 A 的点击率为 5%，变体 B 的点击率为 4%。
个性化变化结果
选择测试策略的选项仅适用于总配置文件超过 400,000 的帐户。如果您的帐户不符合条件，Klaviyo 将使用获胜变体测试策略。如果您选择为每个收件人个性化变体的选项，您将在测试结果页面上看到略有不同的指标，包括以下内容：
- A/B 测试总提升
最佳变体的表现比第二佳变体好多少。根据获胜指标（即打开率或点击率）计算。 – 个性化提升 个性化测试比标准 A/B 测试成功的百分比。 – 个性化点击率 收到其首选变体的配置文件的所有变体之间的平均点击率。 – 由 Klaviyo AI 导出的个人资料特征 人工智能使用的数据列表，用于确定偏好特定变体的配置文件中的模式，即哪些因素可能导致某人更喜欢一种变体而不是另一种变体。单击每个变体可查看使用的数据，因为每个变体的数据都会有所不同。
了解获胜信心和统计意义
举例来说，您想了解向主题行添加表情符号是否会影响电子邮件列表的打开率。如果您只向 2 位订阅者发送测试，并且表情符号的打开率更高，那么您不能断言电子邮件列表的其余部分也会有同样的感觉。 相反，如果您对电子邮件列表中的 100 个人进行测试，并发现表情符号的打开率要高得多，您就会更有信心在主题行中使用表情符号对您的受众来说更好。在获胜概率下，您将看到显示的变化是否具有统计显着性。如果它被认为是显着的，则意味着该变化具有很高的获胜概率（即 90% 或更高）。测试也可能是有希望的、不确定的或没有统计意义的。详细了解 Klaviyo 中的统计显着性。