グローバルホールドアウトグループのスタートガイド

このページで学べること

グローバルホールドアウトグループを使用して、マーケティングの影響と有効性を把握する方法を確認します。グローバルホールドアウトグループでは、一定数のプロファイルをメッセージングから除外することで、マーケティングプログラムの増分効果を判断できます。これらのホールドアウトグループを使用すると、マーケティングプログラムのベース価値を比較して分析できるほか、これらの戦略を継続的に最適化する方法も把握できます。

始める前に

ホールドアウトグループの対象となるには、少なくとも 400,000 件のプロファイル（これはプロファイルの総数であることに注意してください）が必要です。これにより、Klaviyo は、ホールドアウトグループをマーケティングを受け取っている他のプロファイルと比較するのに十分なプロファイルデータを確保できます。十分なデータを収集するために、ホールドアウトグループを 3 か月間実施することも推奨します。

ホールドアウトグループを使用するべき場合と使用しないべき場合の詳細はこちら。

ホールドアウトグループを適切に使用する

ホールドアウトグループの使用方法

ホールドアウトグループは、マーケティング プログラムの有効性や、これらの戦略に加える可能性のあるあらゆる変更をテストしたい場合に使用します。ホールドアウトグループは、貴社からのコミュニケーションを一切受け取らないため、マーケティング戦略の影響を示す明確な比較ができる点で役立ちます。

例えば、次の内容を確立したい場合はホールドアウトグループの使用を検討してください：

• コストに対する、マーケティング プログラム全体の明確な価値と影響。
• マーケティング プログラムに変更（例：新しいチャネルの追加）を加える際に、これらの増分変更に関連付けられる値です。
• 特定のマーケティング活動が実際には有害で、悪影響をもたらしており、調整が必要な場合（例：不適切なタイミングでお客様に対してフローが多すぎる場合）。

ホールドアウトグループに関して考慮すべき追加要素

ホールドアウトグループを使用するタイミングと適用方法を検討することが重要です。

ホールドアウトグループの対象者には、キャンペーンまたはフロー経由で送信されるメール、SMS、プッシュ通知が一切配信されないため、次の要素を考慮してください：

• マーケティングプログラムとの比較に使用できるアクティブなホールドアウトグループは、一度に 1 つだけです。
• ホールドアウトグループは、キャンペーンまたはフローで使用されるすべてのチャネルに適用されます。特定の 1 つのチャネルに対してのみオンにし、別のチャネルではオンにしない、といった設定はできません。
• ホールドアウトグループは、他の重要な季節的な E コマース イベントや時期（例：ブラックフライデー、サイバーマンデー）に影響しません。
• ホールドアウトグループにいる場合も含め、常に受信すべきメッセージ。メッセージのオーバーライドについて詳細はこちら。

ホールドアウトグループと A/B テストの比較

ホールドアウトグループは A/B テストとは性質が異なるため、2 つの機能を混同しないでください。ホールドアウトグループでは、特定のグループの人々に何も送信しないことで、マーケティングコミュニケーションの影響を把握できます。一方、A/B テストでは、マーケティングコミュニケーションの 2 つ以上のバージョンを比較できます。例えば、メールキャンペーンの 2 つのバージョンを比較できます。

ホールドアウトグループの作成

1. ホールドアウトグループを作成するには、[分析] > [実験] に移動し、[グローバル実験] タブをクリックします。

2. [テストを作成] をクリックします。

その後、ホールドアウトグループを設定してカスタマイズするための一連のステップに進みます。

3. 左側のフィールドを使用して、ホールドアウトグループに含めたいマーケティング可能なプロファイルの割合を表す数値を追加します。フィールド内の割合を更新すると、数値が更新され、右側の合計数に反映されます。このフィールドでは、数値のみ（小数点以下 2 桁まで）を使用してください。

4. 割合に問題がなければ、[続行] をクリックします。

5. デフォルトでは、ホールドアウトグループは本日の日付で開始されますが、終了日を選択できます。[日付を選択] フィールドをクリックして、カレンダー ウィジェットを表示します。ここで、カレンダーの日付 をクリックして、終了日を選択します。

また、必要と判断された特定のフローを、ホールドアウトグループのプロファイルでも引き続き受信できるようにすることもできます。これを行うには、特定のフローのホールドアウトグループルールを上書きします。たとえば、多くのウェルカムフローは十分に重要であるため、ホールドアウト 顧客でも引き続き受信されるべきであり、そのため上書きされます。

6. プロファイルが引き続き特定のフローを受け取るようにするには、左側の [フローを検索] フィールドでフロー名を検索します。また、 [タグを選択] ドロップダウンを開き、ドロップダウンから特定のタグを選択して、特定のフローの検索を絞り込むこともできます。

すべてのドロップダウンを開き、ウェルカムシリーズまたは閲覧放棄を選択すると、特定のフローの検索をさらに絞り込めます。これらのオプションのいずれかを選択すると、以下にはこれらの種類のフローのみが一覧表示されます。

最後に、ステータス（Live、Manual、Draft）に基づいてフローを探すこともできます。All statuses メニューを開き、いずれかのオプションを選択します。これにより、下のリストが絞り込まれます。

7. 上書きするフロー（つまり、プロファイルがこれらのフローを受信します）が見つかったら、該当する各フローの横にある [チェックボックス] を選択し、[確認] をクリックします。

上書きするものを選択したくない場合は、[スキップ] をクリックします。

8. [詳細] タブで、開始日と終了日、ホールドアウトグループ内のマーケティング可能なプロファイルの割合などの設定を確認します。

9. 上書きされたフロータブをクリックして、以下の例に示すように、ホールドアウトグループのプロファイルに対して引き続き送信されるフローがあるかどうかを確認します。

10。変更がある場合は、[戻る]をクリックします。それ以外の場合は、ホールドアウトグループをアクティブにする準備ができたら、[テストを開始]をクリックしてください。

ホールドアウトグループを編集または終了する

ホールドアウトグループを設定しており、特定の設定（名前や終了日など）を編集したい場合、またはグループテストを早期に終了したい場合は、Analytics > Experiments > Global Experiments に移動します。

ここではグローバルホールドアウトカードを確認できます（履歴カードの上にデータが表示されているカードです）。

アクティブなホールドアウトグループの編集

1. ホールドアウトグループの名前または終了日を編集するには、カードの右上にある[3 点メニュー]をクリックします。

2. メニューから [詳細を編集] を選択してください。

3. ここから、[テスト名を編集] フィールドでホールドアウトグループの名前を編集できます。また、[テスト終了日を変更] フィールドをクリックし、カレンダー ウィジェットから新しい日付を選択して終了日を調整することもできます。

4. 編集が完了したら、[保存] をクリックします。

アクティブなホールドアウトグループのテストを終了する

テストを早めに終了したい場合は、このカードから終了することもできます。

1. カードの右上隅にある [3 点メニュー] をクリックします。

2. メニューから [テストを終了] を選択します。

3. 次に、テストを終了してホールドアウトグループがすべてのマーケティングメッセージを再び受信するようにするかどうかの確認を求めるモーダルが表示されます。確認するには、[テストを終了] をクリックします。それ以外の場合は、この操作を完了しないように [キャンセル] をクリックします。

上書きされたフローの確認中

1. ホールドアウトグループに対してどのフローを上書きした可能性があるかを確認するには、このカードの右上隅にある [3 ドット メニュー] をクリックします。

2. メニューから アクティブ オーバーライド を選択します。

3. 該当する場合は、この特定のホールドアウトグループに対して選択したフロー オーバーライドを確認します。

追加のフローの上書き

初期のホールドアウトグループの設定を完了すると、オーバーライドされたフローをさらに追加したい場合があります。つまり、ホールドアウトグループに受信させたい他のフローがある場合があります。

1. オーバーライドしたフローをさらに追加するには、[フロー]に移動します。リストから既存のフローを見つけてクリックするか、[フローを作成]をクリックしてホールドアウトグループをオーバーライドします。
2. フロー内に入ったら、フロー内のトリガーを作成するか、既存のトリガーをクリックします。

選択したトリガー（例：リスト）に応じて、既存のグローバルホールドアウトグループを上書きするオプションを含む Trigger Setup パネルが左側に表示されます。以下の例では、リスト トリガーでグローバルホールドアウトグループを上書きするオプションが表示されています。

3. トリガー設定パネルで、グローバルホールドアウトグループのリンクをクリックします。

4. この特定のフローからグローバルホールドアウトグループのメンバーにメッセージを送信したい場合は、[はい] を選択します。それ以外の場合は、No を選択して上書きプロセスを終了してください。

5. Trigger Setup パネルの下部にある[保存] をクリックして変更を保存します。更新内容を保存しない場合は、[キャンセル]をクリックします。

個々のキャンペーン（メール、SMS、またはプッシュ）の上書き

特定のキャンペーンでホールドアウトグループに到達できるようにする必要がある場合があります。たとえば、ブランドからの個別のウェルカムメールをグローバルホールドアウトグループに受信させたい場合があります。この場合、グローバルホールドアウトグループがこの特定のメッセージまたはキャンペーンを受信できるように、該当するキャンペーンを上書きする必要があります。

1. [キャンペーン] に移動します。
2. フィールドで検索するか、以下のリストから該当する下書きキャンペーンを見つけます。新しいキャンペーンを作成する場合は、セットアップ中に同時に上書きを直接追加することもできます。

3. 最初のキャンペーン設定ステップで、 Recipients セクションの Configure option をクリックします。

4. この特定のキャンペーンをグローバルホールドアウトグループのユーザーに送信する場合は、Yes を選択してください。それ以外の場合は、No を選択して上書きプロセスを終了してください。

5. 変更を確定するには [保存] をクリックします。更新内容を保存しない場合は [キャンセル] をクリックします。

6. キャンペーンの残りの設定を続けます。完了したら、[保存して続行] to Content をクリックします。

その後、送信する準備はできましたか？画面で確認が行われ、アクティブなグローバル アカウント グループがこのキャンペーンを受信しないことが表示されます。

後日、新しいマーケティング チャネルを追加する

既存のキャンペーンに新しいチャネル（例：SMS）を追加した場合、グローバルホールドアウトグループを上書きする設定を選択している場合も含め、初回のキャンペーン設定の内容が適用されます。

これを調整する場合は、上記のセットアップ手順に従い、代わりにオーバーライドオプションをオフに切り替えてください。

プロファイルがホールドアウトグループの一部であるか、または過去に一部であったかを確認する

特定のプロファイルが現在グローバルホールドアウトグループの一部であるか、または過去に一時点でも一部であったかを確認できます。

単一のプロファイル内

1. [オーディエンス] > [プロファイル] に移動します。
2. 上のフィールドで検索するか、下のリストからプロファイルを選択してください。以下の例に示すようなバナーで、プロファイルがグローバルホールドアウトグループの一部かどうかを確認できます。

プロファイルが以前にホールドアウトグループの一部であったかどうか、およびそれが発生した時期も確認できます。ホールドアウトグループからの削除は、テストが終了し、プロファイルがそのグループから削除されたことを意味します。

フロー内

1. [フロー] に移動します。
2. 上の検索フィールドを使用するか、以下のリストからフローを見つけてください。
3. スキップされたフロー内のメッセージをクリックしてください。
4. 特定のフロー メッセージについて、左側のパネルを表示して アナリティクス（過去 30 日間） セクションを確認します。ここでは、スキップされたアクティビティの行が表示されます。

5. [スキップ済み] をクリックすると、メールの 「受信者アクティビティ」 タブに移動し、「スキップ済み」 セクションが自動的に表示されます。このセクションでは、特定のフローメッセージについて送信時間に個人がスキップされた理由（グローバルホールドアウトグループに含まれていた場合など）を示します。

キャンペーン内

1. [キャンペーン] に移動します。
2. フィールドで検索するか、以下のリストから適切な送信済みキャンペーンを見つけます。
3. [Skipped Activity] タブをクリックします。このセクションでは、この特定のフロー メッセージについて送信時間に個人がスキップされた理由（グローバルホールドアウトグループに含まれていた場合など）を確認できます。

ホールドアウトグループの分析を確認します。

グローバルアクティブホールドアウトグループカード

分析セクションの最上部にあるグローバル ホールドアウト カードには、現在アクティブなホールドアウトグループに関するすべての情報とデータが詳しく表示されます。このカードは、マーケティング戦略の成功と、それに関連する収益、コンバージョン、リフトを明確に確認できるため、特に役立ちます。

カードの上部には、以下に示すように、全体的なマーケティング リフト率が記載されます。これは、メッセージを一切受け取っていないホールドアウトグループと比較した場合の、マーケティング プログラムのリフトを表します。このメトリックは、マーケティング プログラムの全体的な影響を理解するうえで重要です。

マーケティング リフトの下には、次のデータが含まれます：

• ホールドアウト率
  マーケティング可能なプロファイル総数のうち、マーケティング メッセージを一切受信しなかったプロファイルの割合。これは、初期のホールドアウトグループ設定から導出されます。
• 成約確率
  マーケティングプログラムがホールドアウトグループよりも有意義な改善をもたらす確率。

• 処置群
  すべてのマーケティングの配信対象となるメイン グループです。
• ホールドアウトグループ
  キャンペーンおよびフローを通じて送信されるメール、SMS、プッシュ通知を受け取らないように保持されるグループ。
• マーケティング配信可能なプロファイル
  Klaviyo からメールを送信できるプロファイルはすべて、マーケティング配信可能なメールプロファイルとみなされます。アクティブプロファイルには、主に 2 つのカテゴリーがあります。
  • 購読者
    購読者は、サインアップフォームに登録したか、メールマーケティングの受信に明示的に同意したユーザーです。
  • 一般的なエンゲージメントによって追加されたプロファイル
    継続的なメールマーケティングに明示的に同意していなくても、誰かがメールアドレスを共有する可能性があります。例えば、サイトで注文をした人やチェックアウト落ちした人（チェックアウトプロセス中にメールアドレスを追加したかもしれないが、明示的にオプトインしたことはない）が該当します。

最後の 2 列は、アカウントで使用されているコンバージョンのメトリックを表しており、合計の生の数と、それが合計に占める割合（％）が反映されています。プロファイルによって行われた合計コンバージョンであり、アトリビューションされたコンバージョンではない点に注意してください。

履歴カード

履歴サマリーカードには、すべてのホールドアウトグループのデータが表示されます。このカードは、マーケティングプログラムに加えた増分的な変更と、それらがコンバージョンやリフトにどのように影響したかを確認するのに特に役立ちます。ここでは、これらの変更や特定の時点をさかのぼって追跡し、プログラムで何が成功したかを把握できます。

列は次の内容を表します。

• 名前
  設定したグローバルホールドアウトグループの名前。
• 開始日
  グローバルホールドアウトグループが設定され、最初にアクティブになった日時です。
• 終了日
  グローバルホールドアウトグループが終了し、プロファイルがそこから削除された日時。
• ホールドアウト サイズ
  ホールドアウトグループで表される、マーケティング可能なプロファイル総数に対するプロファイルの割合。これは、初期のホールドアウトグループ設定から導出されます。
• マーケティング リフト
  選択したコンバージョン メトリックを使用し、ホールドアウトグループと比較したマーケティング プログラムのリフト率（％）。これは、マーケティングの大部分またはすべてを受け取っていない場合と比較した、マーケティング戦略全体の成功度を示します。
• 勝率
  マーケティングプログラムが、ホールドアウトグループよりも有意義な改善をもたらす確率。

また、これらの列のいずれかの横にある矢印をクリックして、名前、日付、ホールドアウト サイズ、マーケティング リフト、勝率を昇順または降順で並べ替えることもできます。

グローバル ホールドアウト名のいずれかをクリックすると、個別の分析カードに移動し、この特定のグループのデータがマーケティング プログラムと比較して表示されます。

その他のリソース