如何对流电子邮件进行 A/B 测试
你将会学到
了解如何使用 Klaviyo 的 A/B 测试经验来测试流程中的单封电子邮件,包括主题行、折扣和电子邮件内容等。您甚至可以使用 A/B 测试来确定纯文本电子邮件是否比包含大量图像的 HTML 电子邮件表现更好。
关于流程和 A/B 测试
流程电子邮件 A/B 测试包括以下过程:
- 创建单流电子邮件并安排该电子邮件在一定的小时数或天数后发送,就像平常一样。
- 为此单流电子邮件配置两个或多个电子邮件变体 – 调整每个变体的主题行或核心电子邮件内容。
- 选择每个变体的权重以确定将收到每封电子邮件的收件人的百分比。 4.达到统计显着性后自动选择获胜变体,或根据变体中最高打开率或最高点击率手动选择获胜者。
执行流电子邮件 A/B 测试
通过流程构建器可以轻松创建 A/B 测试。请注意,在完成对电子邮件的测试后,您可以根据需要在将来为同一电子邮件创建另一个测试。
创建一个新测试
- 要为任何流程中的单个电子邮件设置 A/B 测试,请单击流程构建器中的电子邮件。
- 如果您尚未配置电子邮件的内容,请进行配置。
- 在电子邮件详细信息面板中单击创建 A/B 测试。
当您为现有流电子邮件创建 A/B 测试时,系统会创建该电子邮件的两个新副本。如果流电子邮件处于活动状态并且已经发送,则在发布 A/B 测试时,将单独跟踪每个副本的分析。一旦您添加了变体,我们就不会继续跟踪原始电子邮件的分析。
编辑变体
创建新测试后,您将直接进入 管理内容 窗口的 A/B 测试 选项卡。每个测试都会自动包含 2 个变体。单击变体时,您可以编辑变体名称、主题行、预览文本、发件人姓名和发件人电子邮件地址。 1. 要编辑电子邮件内容,请单击右侧电子邮件预览上方的编辑电子邮件按钮。
添加新变体
如果您想添加另一个变体,则必须克隆现有 2 个变体中的 1 个。 1. 单击要作为新变体基础的变体右侧的克隆图标。
- 这将创建一个新的变体,您可以对其进行修改以区别于原始的 2 个变体。
删除变体
A/B 测试必须至少有 2 个变体,因此只有当有 3 个或更多变体时才能删除变体。此外,只有当测试处于草稿状态时才能删除变体。对于实时 A/B 测试,删除变体是禁用的。 1. 要删除变体,请单击要删除的变体右侧的垃圾桶图标。
选择每个变体的权重
在 A/B 测试 选项卡的底部,您将看到 测试设置 部分,您可以在其中编辑每个变体的权重 – 这将确定将收到每个变体的收件人的百分比。通常建议平均权衡每个变化,但您可以将百分比更改为您想要的任何数量。您还可以选择自动选择分发的选项。这将首先将每个变体的分布设置为相等。随着时间的推移,如果其中一个变体的性能优于其他变体,Klaviyo 将自动调整分布,以在测试仍在运行时引导更多接收者使用性能更好的变体。
配置获胜者选择
测试将默认根据点击率自动选择获胜者,但这可以更改。 1. 在 A/B 测试 选项卡底部的 测试设置 部分中,您还可以通过单击 获胜者选择 下的 配置** 链接来配置获胜者选择。
- 将出现一个模式,您可以在其中将获胜指标更改为打开率。
对于流电子邮件,只有打开率和点击率可用作获胜指标。建议使用点击率,因为 Apple Mail 隐私保护 (MPP) 等许多因素可能会导致打开率过高。有关 MPP 打开的完整信息,请访问我们的 iOS 15:如何准备 Apple 的变更指南。 3. 在自动获胜者选择部分,有 2 个选项:
- 如果确定获胜指标具有高统计确定性(统计显着性)获胜,则结束测试:默认选中此选项。如果您想手动结束测试,请取消选中此选项旁边的框,或者选择在特定日期后结束测试的选项。
- 设置日期限制: 此选项允许您选择自动结束测试的特定日期。
- 如果您选择这两个选项,则如果达到统计显着性或达到指定日期(取决于先发生的日期),测试将结束。
- 单击保存设置按钮确认您的配置。
发布测试
- 配置好变体后,您就可以发布测试了。在A/B 测试选项卡中,单击右上角的发布测试 按钮。
- 将出现一个模式,要求您确认发布。单击发布测试按钮进行确认。
删除测试
- 如果您想要删除测试,请从 A/B 测试 选项卡中,单击 发布测试 按钮旁边的箭头,然后选择 删除。
查看 A/B 测试结果
- 您可以在测试运行时或完成后查看测试结果,方法是单击流程构建器中的电子邮件并单击查看测试按钮。
这将带您进入 A/B 测试结果页面,您可以在其中查看以下指标:
- 收件人
- 打开
- 点击次数
- 转换指标
有多少人收到电子邮件
打开电子邮件的百分比/人数是多少
点击电子邮件的人数百分比/人数
触发转换指标的收件人总数(为电子邮件选择的转换指标,例如已下订单)。
有关 A/B 测试结果页面的更多详细信息,请参阅我们关于如何查看流程的电子邮件 A/B 测试结果 的文章。
手动选择获胜者
在大多数情况下,您会希望等待 A/B 测试自动选择获胜者,但在某些情况下您可能希望提前结束 A/B 测试。在这种情况下,请按照以下步骤操作。 1. 在A/B 测试结果页面中,您可以通过单击页面右上角的选择优胜者按钮,手动选择测试的获胜变体。
- 将出现一个模式,要求您从每个现有变体中选择一个获胜者。从下拉列表中选择您想赢得的变体,然后单击选择获胜者按钮。
将消息的状态从实时状态更改为草稿状态将结束测试,并根据获胜指标自动选择获胜者 – 如果出现平局,将选择第一个变体。了解有关流程中 A/B 测试的更多信息: