メールキャンペーンを A/B テストする方法
このページで学べること
キャンペーンの A/B テストを設定して実行する方法、テスト結果の読み取り方法、キャンペーンの A/B テストのいくつかのユースケースをご確認ください。Klaviyo のキャンペーン向け A/B テスト機能では、件名、メッセージコンテンツ、送信時間の違いを簡単にテストできるため、オーディエンスにとって何が最も効果的かをより深く理解できます。
キャンペーン メールの A/B テストを作成する
- [キャンペーン] > [キャンペーン] [作成] に移動します。
- キャンペーンを作成ウィンドウでキャンペーンに名前を付けてください。
- 単一チャネルを選択し、次にメールを選択して、続行をクリックしてください。
- 送信先にしたいリストまたはセグメントを選択してください。
- [次へ] をクリックします。
- 件名を入力し、必要に応じてプレビューテキスト、送信者名、送信者メールアドレスを編集します。
- コピー、画像、リンクを追加して、メールの最初のバージョンを作成します。
- テストを手動で作成するには、件名フィールドの上にあるA/Bテストを作成をクリックしてください。代わりにAIで件名のバリエーションを生成するには、テストを作成する前に下のAIで件名をテストに進んでください。
- これにより、キャンペーンの同一の2つ目のバリエーションが自動的に作成され、編集用にバリエーションが開きます。
- 各バリエーション名フィールドに、A/Bテストしている内容が分かる説明的なバリエーション名（例：「夏のローンチメール - 白いボタン」）を追加してください。
テストのバリエーションを設定
キャンペーンでテストする要素を決定し、次のいずれかのオプションを使用してバリエーションを設定してください。
AI を使って件名をテストする
AI件名テストは無料アカウントと有料アカウントの両方でご利用いただけます。バリエーションを生成する前に、件名を入力し、メールテンプレートを選択してください。
手動でテストを作成する代わりに、AI を使用して作成を自動化することもできます。この機能は、特に件名をテストするためのものです。
- バリエーションが1つだけのメールキャンペーンから始めてください。上記の手順に従っている場合は、A/Bテストを作成をクリックする前に停止してください。
- まだ完了していない場合は、件名を入力し、テンプレートを選択して、メールのコンテンツを編集してください。
- 件名フィールドの下で、A/Bテスト用にバリエーションを生成セクションのオプションのいずれかを選択してください。
オプションを選択すると、AIによって2つのバリエーションのテストが作成されます。バリエーションAでは元の件名が維持され、バリエーションBでは選択したプロンプトから生成された件名が使用されます。
次のオプションのいずれかを選択してください。生成されたバリエーションは、元の件名によって異なります：
- パーソナライズありとパーソナライズなし
バリエーション B では、件名に顧客の名を含めるか、元々含まれていた場合は名前を削除します。 - 短い件名 vs 長い件名
バリエーションBは、元の件名の長さに応じて件名が短くなるか長くなります。 - 質問形式と断定文
バリエーションBでは、元の件名を質問形式に変換します。また、元の件名が質問形式だった場合は断定文に変換します。 - 絵文字あり vs 絵文字なし
バリエーション B では、件名に関連する絵文字を含めるか、もともと含まれていた絵文字を削除します。
A/Bテストを作成したら、さらに編集して送信する方法の手順については、この記事の残りをお読みください。
コンテンツのテスト
メッセージ内容をテストして、オーディエンスが何を見たいのかを把握できます。A/Bテストの設定で、コンテンツをテストを選択してください。
A/Bテストのバリエーションのうち1つを編集してください。A/Bテストでは一度に1つの要素を比較することが重要です。そのため、件名を編集する場合は、他の変更は行わないでください。必要に応じて、特定のバリエーションのカードにある複製アイコンをクリックして、バリエーションを追加できますが、バリエーションは2つのみにすることをおすすめします。
送信時間のテスト
オーディエンスがいつ連絡を受け取りたいかを把握するために、送信時間をテストすることもできます。A/Bテストの設定で、送信時間をテストを選択します。
送信時間をテストする場合は、両方のバリエーションのコンテンツと件名を完全に同一にしてください。
各バリエーションで、送信日と送信時間を選択してください。これらの時間はアカウントのタイムゾーンを使用します。送信時間テストはキャンペーンの受信者の100％に送信されるため、テスト後に勝者のバリエーションを受信する残りのオーディエンスはありません。
どこから始めればよいかわからない場合は、夕方の時間を試すことをおすすめします。または、対象であれば、代わりに スマート送信時間 を使用できます。
テスト戦略を選択
テスト戦略を選択するオプションは、合計プロファイル数が400,000以上のアカウントでのみ利用できます。アカウントが対象条件を満たさない場合、Klaviyoは勝者バリエーションのテスト戦略を使用します。
アカウントが条件を満たしている場合は、次のオプションからテスト戦略を選択します。
- 勝者のバリエーション（標準 A/B テスト）
- 受信者ごとにパーソナライズされたバリエーション
勝利したバリエーションとパーソナライズされたバリエーションの違い
コンテンツテストでキャンペーン受信者の100％未満を使用する場合、どちらの戦略もテストグループにバリエーションを送信し、開封率など、選択したメトリックを使用して成果を測定します。テスト期間終了後、残りの受信者への送信方法が異なります：
- 勝利バリエーション - A/B テストのデフォルト オプションです。テスト期間終了後に勝利バリエーションを 1 つ決定し、キャンペーンの残りの受信者に送信します。
- パーソナライズされたバリエーション - AI を使用して、各バリエーションとやり取りするテスト受信者の間でパターンを検索します。テスト期間が終了すると、Klaviyo は各受信者に対してどのバリエーションのパフォーマンスが高いかを予測し、残りの受信者に好みのバリエーションを送信します。
各受信者に合わせてバリエーションをパーソナライズする
各受信者が受け取るバリエーションを個別にパーソナライズする場合は、受信者ごとにパーソナライズされたバリエーション を選択してください。
Klaviyo は各プロファイルに関する情報を使用して、そのプロファイルのコンバージョンに最も成功する可能性が高いバリエーションを判断します。このプロファイル情報には、次の内容が含まれますが、これらに限定されません：
- 過去のエンゲージメント率
- 顧客生涯価値（CLV）
- ロケーション
たとえば、勝者のメトリックとして開封率を選択し、顧客生涯価値が 100 以上のテスト グループのプロファイルはバリエーション A をより頻繁に開封する一方、顧客生涯価値が 100 未満のプロファイルはバリエーション B をより頻繁に開封する場合、キャンペーンの残りの受信者には、顧客生涯価値に基づいて最も開封する可能性が高いバリエーションのメールが送信されます。これは簡単な例であり、Klaviyo はパーソナライズされたバリエーションを決定するために多数のデータ ポイントを使用します。
バリエーションをパーソナライズするのに十分なエンゲージメントがない場合、Klaviyoは残りの受信者に代わりに勝ちバリエーションを送信します。
A/B テスト設定を構成
バリエーションを設定したら、テスト設定を選択してください。コンテンツテストでは、テストサイズを調整できます。また、テストサイズが100％未満の場合は、テストの実施期間も調整できます。
まず、改善を確認したい主要なメトリックである、勝ちのメトリックを選択します。次から選択します：
- 開封率
件名、プレビューテキスト、または差出人名とメールアドレスをテストする場合に推奨されます。 - クリック率
ボタンのサイズや色などのメールコンテンツをテストする場合に推奨されます。 - 注文率
「注文の確定」メトリックがあるアカウントでのみ利用可能で、パーソナライズされたバリエーションでは利用できません。これは、ベストセラーや新着商品を表示するかどうかなど、メールコンテンツをテストする際に推奨されます。
受信者がiOS 15、macOS Monterey、iPadOS 15、watchOS 8、またはそれ以降のリリースでApple Mail Privacy Protection（MPP）をオンにすると、MPPが当社のトラッキングピクセルを事前取得し、お客様のメールで当社が受け取る開封率データが変化します。この変更によって、開封率が水増しされる可能性がある点を理解しておくことが重要です。
開封率のA/Bテストでは、MPPの開封を含む記録済みの開封がカウントされるため、勝利バリエーションには、人によるエンゲージメントだけでなく自動開封も反映される可能性があります。A/Bテストを定期的に実施しており、Apple Mail内での開封が全体の約45％を超える場合は、MPPプロパティを含むカスタムレポートを作成することをおすすめします。これらの開封も、個別の購読者セグメントで特定できます。
MPP 開封の完全な情報については、iOS 15: Apple の変更について知っておくべきことすべて ガイドをご覧ください。
コンテンツテストでは、Klaviyoはオーディエンス規模に基づいてテストサイズを、勝利メトリック（開封、クリック、または注文の確定）に基づいてテスト期間を推奨します。必要に応じて、スライダーを使用してテストサイズを変更してください。テストサイズが100％未満の場合は、テスト期間も調整できます。送信時間テストのテストサイズは100％で固定されています。
テストサイズ40％、テスト期間6時間の標準コンテンツテストでは、キャンペーンの受信者の20％にバリエーションAが送信され、別の20％にバリエーションBが送信されます。これらの受信者のうち何人が開封、クリック、または注文を確定したか（選択した勝利メトリックに応じて）に基づいて、6時間後に勝者が選ばれ、残りの受信者には勝利したバリエーションが送信されます。
テストの日時を設定するか、送信します。
次の手順に従って、テストを送信またはスケジュールしてください：
- 各受信者のローカルタイムゾーンで送信するコンテンツテストを実施する場合は、続行する前にテストサイズを100％に設定してください。
- キャンペーンを確認するには、次へをクリックしてください。
- キャンペーンの詳細を確認してエラーを解決し、スケジュールまたは送信をクリックしてください。
- コンテンツテストの場合は、今すぐ送信またはスケジュールを選択してください。スケジュールする場合は、日付、時刻、タイムゾーンを選択してください。各受信者のローカルタイムゾーンで送信するには、受信者のローカルタイムゾーンを選択してください。送信時間テストの場合は、各バリエーションにすでに設定されている日付と時刻を確認してください。
- 確認するには、状況に応じて今すぐ送信またはメッセージをスケジュールをクリックしてください。
A/B テストの対象
一度にテストする変数は 1 つだけにしてください。複数の変数を同時にテストすると、パフォーマンス改善に寄与する変数を特定することが困難（または不可能）になる場合があります。何をテストすべきか分かりませんか？以下のセクションをクリックして、出発点を確認してください。
注文率を向上させるためのテスト
受信者が注文するきっかけを把握するには、メッセージで次のいずれかをテストしてみてください。
- ソーシャル プルーフ（例：メッセージに肯定的なレビューや顧客のソーシャルメディア投稿を含める）
- 送信時間、曜日、または週末と平日の比較
- 行動喚起（CTA）の配置（例: メールの上部付近、または下部）
クリック率を向上させるためのテスト
受信者がメッセージ内のリンクをクリックする要因を把握するには、次のいずれかをテストしてみてください。
- CTA の外観（例：ボタンまたはテキストのフォント、色、サイズ）
- CTA テキスト（例:「今すぐ購入」と「詳細を見る」の比較）
- テンプレートの構成（例: メッセージ内での画像とテキストの配置方法）
- 画像と GIF の比較
開封率を向上させるためのテスト
購読者がメールを開封するきっかけとなる要因を把握するには、次のいずれかをテストしてみてください。
- 件名のテスト：
- ステートメントと質問（例：「最新のドロップは見逃せません」vs「最新のドロップを見たいですか？」）
- 件名の長さ
- 件名のパーソナライズ（例：{{ first_name|default:'Friend' }}タグを使用して、件名に受信者の名を含める）
- 件名の絵文字
- プレビューテキスト（例：プレビューテキストを含める場合と含めない場合）
- 送信者名（例：会社名だけの表示と「Klaviyo | Elise」のようなより個人的な送信者名の比較）
- 送信時間、曜日、または週末と平日の比較
A/B テスト結果を確認し、勝者を選択する（任意）
キャンペーンを開いて、各バリエーションのパフォーマンスを比較し、勝率を確認してください。実行中のコンテンツテストを早期に終了して手動で勝者を選択するには、一部の受信者が勝者を受け取れるように、テストサイズを100％未満にする必要があります。
勝者を選択するとテストが終了し、残りの受信者にそのバリエーションの送信が直ちに開始されます。
- キャンペーンのA/Bテスト結果タブに移動してください。
- 選択したいバージョンの横にある追加オプション メニューをクリックしてください。
- 勝者として選択をクリックしてください。
- 確認ウィンドウで、勝者を選択をクリックしてください。
A/Bテストの対象が受信者の100％だった場合、勝ちバリエーションの後日配信はありません。新しいエンゲージメントデータが入るにつれて、報告される勝者が変わる場合があります。詳しくは、キャンペーンのメールA/Bテスト結果を確認する方法をご覧ください。
その他のリソース
- フロー メールを A/B テストする方法
Klaviyo の A/B テスト エクスペリエンスを使用して、フロー内の個別のメール（件名、割引、メールコンテンツなど）をテストする方法を学びます。A/B テストを使用して、プレーンテキストのメールが画像の多い HTML メールよりも高い成果を上げるかどうかを判断することもできます。
- SMS キャンペーンを A/B テストする方法
この記事では、SMS キャンペーンを A/B テストする方法と、テストすべき要素について学べます。
- Mastering Email A/B Testing: Klaviyo’s Proven Tips & Tricks to Boost Revenue