So führst du A/B-Tests für SMS-Kampagnen durch

Übersicht

In diesem Artikel erfährst du, wie du A/B-Tests für SMS-Kampagnen durchführst und welche Aspekte du testen solltest.

Mit A/B-Tests für Klaviyo SMS kannst du Erkenntnisse über deine Zielgruppe gewinnen und diese Informationen nutzen, um deine Nachrichten und Versandzeitpunkte zu optimieren. Dieser Artikel behandelt Kampagnentests. Du kannst auch deine SMS-Flow-Nachrichten mit Split testen.

Best Practices für A/B-SMS-Tests

Wie bei der E-Mail gibt es mehrere Best Practices für A/B-SMS-Tests:

• Teste jeweils einen Aspekt.
• Füge einen Link hinzu und verwende den Klaviyo-Linkverkürzer.
• Für MMS: Bilder oder GIFs unter 600 KB speichern
• Optimiere deinen CTA und deinen Nachrichtentext.

Was du testen solltest

Hier sind ein paar Ideen, was du für SMS A/B-testen kannst:

• MMS im Vergleich zu SMS
  SMS erzielt in der Regel die gleiche oder eine bessere Performance als MMS. Da MMS mehr kostet, lohnt es sich herauszufinden, ob das Senden von MMS-Nachrichten für deine Marke sinnvoll ist.
• Emojis
  Wie bei MMS haben auch SMS-Nachrichten ohne Emojis tendenziell die gleiche oder eine bessere Performance. Außerdem verkürzen Emojis das Zeichenlimit für SMS von 160 auf 70, was oft dazu führt, dass du für diesen Versand mehr Nachrichtensegmente (höhere Kosten) verwenden musst.
• Nachrichtenlänge
  Kürzere SMS-Nachrichten haben in der Regel auch ein höheres Kundenengagement, aber es lohnt sich, zu testen, wie deine Abonnent*innen auf SMS-Nachrichten mit längerer Form reagieren.
• Sprache (in einem bestimmten Gebiet/Land)
  Je nach Zielgruppe solltest du testen, welche Sprache für ein bestimmtes Segment, eine bestimmte Region oder ein bestimmtes Land am besten funktioniert. Dies kann hilfreich sein, wenn es mehrere Amtssprachen für ein Land gibt (z. B. in der Schweiz) oder wenn du feststellst, ob du in einer anderen Sprache an ein bestimmtes Segment oder Gebiet senden möchtest (z. B. Montreal).

Du solltest auch verschiedene Arten von SMS-Kampagnen testen, z. B. Produktwerbung, Newsletter, Sale usw. Was bei einem Nachrichtentyp gut funktioniert, funktioniert bei einem anderen möglicherweise nicht. Außerdem kann eine Kampagne andere Ergebnisse erzielen als eine Flow-Nachricht. Wende die Ergebnisse eines A/B-Tests also nicht auf jede Nachricht an, die du versendest.

Bevor du anfängst

Klaviyo bietet dir die Möglichkeit, Nachrichteninhalte (z. B. Call-to-Action, Emojis und Bilder/GIFs) oder Versandzeitpunkte zu testen.

Du kannst keinen A/B-Test erstellen, solange die Inhalts-Personalisierung für die Nachricht aktiviert ist.

Für einen Versandzeitpunkt-Test segmentierst du deine Zielgruppe zuerst nach Standort oder Land. Versandzeitpunkt-Tests verwenden die Zeitzone deines Kontos. Wähle daher Zeiten aus, die für Empfänger*innen im Segment passend sind.

Wähle dieses Segment aus, wenn du die Empfänger*innen der Kampagne auswählst.

A/B-Test für SMS-Nachrichten

Unabhängig davon, ob du den Inhalt der Nachricht oder den Versandzeitpunkt testen möchtest, solltest du mit den folgenden Schritten beginnen:

1. Navigiere zu Kampagnen und klicke auf Kampagne erstellen.
2. Gib einen Kampagnennamen ein, wähle Einzelner Kanal aus, wähle ein Datum aus und wähle Textnachricht aus.
3. Klicke auf Weiter.
4. Wähle deine Empfänger*innen aus und klicke dann auf Weiter.
5. Verfasse im Feld Nachrichteninhalt deine Nachricht (du kannst erst dann einen A/B-Test erstellen, wenn du Inhalte hinzugefügt hast).
6. Klicke auf A/B-Test erstellen , um eine Kopie deiner bestehenden Nachricht (einschließlich aller Bilder, GIFs, Personalisierungen usw.) zu erstellen.
   

7. Als Nächstes entscheidest du, ob du:
   1. A/B-Test des SMS-Inhalts durchführen
   2. A/B-Test der SMS-Versandzeitpunkte

SMS-Inhalt testen

1. Klicke auf das Drop-down-Menü für die Varianten.
2. Wähle die Variante aus, die du für den Test ändern möchtest.
3. Ändere nur einen Aspekt des Originals (z. B. wenn du ein Bild hinzufügst, ändere nichts anderes an der Nachricht).
4. Klicke oben rechts auf Weiter, um die Nachricht zu speichern und die Einstellungen für den A/B-Test zu öffnen.
5. Wähle eine Teststrategie aus und überprüfe deine A/B-Test-Einstellungen.

Wenn du Inhalte per A/B-Test testest und deine Nachricht basierend auf der Zeitzone jeder*s Empfänger*in senden möchtest, lege deine Testgröße auf 100 % fest. Wenn du deine Kampagne planst, hast du die Option, Lokale Zeitzone der Empfänger*innen als Zeitzone für deinen Versand auszuwählen.

SMS-Versandzeitpunkte testen

1. Behalte den Inhalt der Nachricht genau bei.
2. Klicke oben rechts auf Weiter, um die Nachricht zu speichern und die Einstellungen für den A/B-Test zu öffnen.
3. Wähle unter Testtyp die Option Versandzeitpunkt testen aus.

4. Wähle die Daten und Uhrzeiten aus, die du A/B-testen möchtest. Diese Zeiten verwenden die Zeitzone deines Kontos.
5. Sieh dir die verbleibenden Einstellungen unten an. Tests zum Versandzeitpunkt verwenden 100 % der Empfänger*innen. Daher kannst du weder die Testgröße noch die Testdauer anpassen, und es wird keine Gewinnnachricht an eine verbleibende Zielgruppe gesendet.

Wähle eine Teststrategie

Wenn dein Konto qualifiziert ist, kannst du aus den folgenden Optionen eine Teststrategie auswählen:

• Gewinnervariante (Standard-A/B-Test)
• Personalisierte Varianten für alle Empfänger

Der Unterschied zwischen Gewinnervariante und personalisierten Varianten

Bei Inhaltstests mit einer Testgröße unter 100 % senden beide Strategien Varianten an eine Testgruppe. SMS-Tests verwenden die Klickrate oder, wenn verfügbar, für Standard-A/B-Tests die Bestellrate, um den Erfolg zu messen. Nach dem Testzeitraum sendet jede Strategie unterschiedlich an die verbleibenden Empfänger*innen:

• Gewinnervariante – die Standardoption für A/B-Tests, mit der eine Gewinnervariante ermittelt und nach Ablauf des Testzeitraums an die übrigen Empfänger der Kampagne gesendet wird.
• Personalisierte Varianten – verwendet KI, um nach Mustern unter den Testempfänger*innen zu suchen, die mit jeder Variante interagieren. Nachdem der Testzeitraum beendet ist, sagt Klaviyo voraus, welche Variante für jede*n Empfänger*in besser abschneiden wird, und sendet den übrigen Empfänger*innen ihre bevorzugte Variante.

Varianten für die einzelnen Empfänger personalisieren

Wenn du personalisieren möchtest, welche Variante die einzelnen Empfänger*innen auf individueller Basis erhalten, wähle Personalisierte Varianten für die einzelnen Empfänger*innen aus.

Klaviyo verwendet Informationen zu jedem Profil, um vorherzusagen, auf welche Variante sie am wahrscheinlichsten klicken. Diese Profilinformationen umfassen unter anderem:

• Historische Kundenengagement-Raten
• Customer Lifetime Value (CLV)
• Standort

Wenn zum Beispiel Profile in der Testgruppe mit einem Customer Lifetime Value von 100 oder mehr häufiger auf Variante A klicken, Profile mit einem Customer Lifetime Value von weniger als 100 jedoch häufiger auf Variante B klicken, kann Klaviyo dieses Muster nutzen, um Varianten für die verbleibenden Empfänger*innen auszuwählen. Dies ist ein vereinfachtes Beispiel, da Klaviyo viele Datenpunkte verwendet, um personalisierte Varianten zu bestimmen.

Einstellungen eines A/B-Tests anpassen (optional)

Sieh dir die Einstellungen für deinen Test an:

• Die Gewinner-Metrik des Tests: Klickrate oder bei Standard-A/B-Tests Bestellrate bei aufgegebener Bestellung, wenn dein Konto über eine zugeordnete Metrik „Placed Order“ verfügt. Personalisierte SMS-Variante verwenden die Klickrate.
• Für Inhaltstests: der Prozentsatz der Empfänger*innen in der Testgruppe. Versandzeitpunkt-Tests verwenden 100 %.
• Bei Inhaltstests unter 100 % die Testdauer. Wenn du die Bestellrate für aufgegebene Bestellungen auswählst, empfehlen wir mindestens 24 Stunden.

Bei Inhaltstests unter 100 % sendet Klaviyo nach dem Testzeitraum je nach deiner Strategie die Gewinner-Variante oder die personalisierte Variante jeder*s Empfänger*in. Bei einem 100-%-Test erhält jede*r eine Test-Variante, und es gibt keinen späteren Versand der Gewinner-Variante.

Kampagne prüfen und planen

1. Klicke auf Weiter, um deine Testeinstellungen zu speichern und deine Kampagne zu überprüfen. Behebe alle Probleme, die in der Überprüfung angezeigt werden.
2. Klicke auf Planen oder senden.

• Wähle für einen Inhaltstest aus, wann gesendet werden soll, und überprüfe die Zeitzone. Klicke auf Nachricht planen, um einen geplanten Versand zu bestätigen, oder auf Jetzt senden, um sofort zu senden.
• Für einen Test des Versandzeitpunkts überprüfe die Daten und Uhrzeiten für jede Variante und klicke dann auf Nachricht planen.

Weitere Ressourcen