So führst du A/B-Tests für E-Mail-Kampagnen durch

Übersicht

Erfahre, wie du einen A/B-Test für eine Kampagne einrichtest und durchführst, wie du die Testergebnisse interpretierst und welche Anwendungsfälle es für A/B-Tests in Kampagnen gibt. Mit Klaviyos A/B-Test-Funktionen für Kampagnen kannst du ganz einfach verschiedene Betreffe, Nachrichteninhalte und Versandzeitpunkte testen, damit du besser verstehst, was für deine Zielgruppe am besten funktioniert.

A/B-Test für Kampagnen-E-Mails erstellen

1. Gehe zu Kampagnen > Kampagne erstellen.
2. Gib im Fenster Kampagne erstellen deiner Kampagne einen Namen.
3. Wähle Einzelner Kanal aus, dann E-Mail, und klicke auf Weiter.
4. Wähle die Listen oder Segmente aus, an die du senden möchtest.
5. Klicke auf Weiter.
6. Gib den Betreff ein und bearbeite bei Bedarf den Vorschautext, den Absendernamen und die Absender-E-Mail-Adresse.
7. Erstelle die erste Version deiner E-Mail und füge deinen Text, Bilder und Links hinzu.
8. Um den Test manuell zu erstellen, klicke oben im Betreff-Feld auf A/B-Test erstellen. Um stattdessen mit KI eine Betreff-Variante zu generieren, springe vor dem Erstellen des Tests unten zu Betreffe mit KI testen.
   • Dadurch wird automatisch eine zweite, identische Variante deiner Kampagne erstellt und die Varianten werden zur Bearbeitung geöffnet.

9. Füge in jedem Feld Name der Variante einen aussagekräftigen Variantennamen hinzu, der darauf verweist, was du in deinem A/B-Test testest, z. B. „E-Mail zum Sommer-Launch – weiße Buttons.“
   

Konfiguriere deine Testvarianten

Entscheide, welches Element deiner Kampagne du testen möchtest, und konfiguriere dann deine Varianten mit einer der untenstehenden Optionen.

Betreff mit AI testen

Anstatt einen Test manuell zu erstellen, kannst du die Erstellung auch mit KI automatisieren. Diese Funktion dient insbesondere zum Testen von Betreffs.

1. Beginne mit einer E-Mail-Kampagne, die nur 1 Variante hat. Wenn du die Schritte oben befolgst, halte an, bevor du auf A/B-Test erstellen klickst.
2. Gib deinen Betreff ein, wähle eine Vorlage aus und bearbeite den E-Mail-Inhalt, falls du das noch nicht getan hast.
3. Unter dem Feld Betreff wähle im Abschnitt Eine Variante für einen A/B-Test generieren eine der Optionen aus.
   

Nachdem du eine Option ausgewählt hast, erstellt KI einen Test mit 2 Varianten: Variante A behält deinen ursprünglichen Betreff bei, und Variante B verwendet einen Betreff, der aus deinem ausgewählten Prompt generiert wird.

Wähle eine der folgenden Optionen aus. Die generierte Variante hängt von deinem ursprünglichen Betreff ab:

• Personalisierung vs. keine Personalisierung
  Variante B enthält den Vornamen der Kund*innen in der Betreff oder entfernt ihren Namen, falls er ursprünglich enthalten war.
• Kurz vs. lang
  Variante B hat je nach Länge deines ursprünglichen Betreffs entweder einen kürzeren oder einen längeren Betreff.
• Frage vs. Aussage
  Variante B wandelt deinen ursprünglichen Betreff in eine Frage um oder in eine Aussage, falls es ursprünglich eine Frage war.
• Emoji vs. kein Emoji
  Variante B enthält ein relevantes Emoji im Betreff oder entfernt alle Emojis, falls sie ursprünglich enthalten waren.

Lies den Rest dieses Artikels, um die Schritte zu erfahren, wie du deinen A/B-Test nach der Erstellung weiter bearbeiten und senden kannst.

Inhalts-Test

Du kannst Nachrichteninhalte testen, um herauszufinden, was deine Zielgruppe sehen möchte. Wähle in A/B-Test-Setup Testinhalt aus.

Bearbeite eine der Varianten für deinen A/B-Test. Für A/B-Tests ist es wichtig, jeweils nur einen Faktor zu vergleichen. Wenn du also den Betreff bearbeitest, ändere nichts anderes. Wenn du möchtest, kannst du weitere Varianten hinzufügen, indem du auf das Symbol Klonen auf der Karte für eine bestimmte Variante klickst, aber wir empfehlen nur 2 Varianten.

Versandzeitpunkt testen

Du kannst auch Versandzeitpunkte testen, um festzustellen, wann deine Zielgruppe von dir hören möchte. Wähle unter A/B-Test-Einrichtung Versandzeitpunkte testen aus.

Achte beim Testen von Versandzeitpunkten darauf, dass Inhalt und Betreff beider Varianten exakt gleich sind.

Wähle für jede Variante ein Versanddatum und einen Versandzeitpunkt. Diese Zeiten verwenden die Zeitzone deines Kontos. Versandzeitpunkt-Tests werden an 100 % der Empfänger*innen der Kampagne gesendet, daher bleibt keine Zielgruppe übrig, die nach dem Test eine gewinnende Variante erhalten kann.

Wenn du nicht weißt, wo du anfangen sollst, empfehlen wir, es am Abend zu versuchen. Alternativ kannst du, wenn du dafür qualifiziert bist, stattdessen Smart Send Time verwenden.

Teststrategie auswählen

Wenn dein Konto qualifiziert ist, entscheide dich anhand der folgenden Optionen für deine Teststrategie:

• Gewinnervariante (Standard-A/B-Test)
• Personalisierte Varianten für alle Empfänger

Der Unterschied zwischen der gewinnenden Variante und personalisierten Varianten

Wenn ein Inhaltstest weniger als 100 % der Empfänger*innen einer Kampagne umfasst, senden beide Strategien Varianten an eine Testgruppe und messen ihren Erfolg anhand deiner ausgewählten Metrik, z. B. der Öffnungsrate. Nach dem Testzeitraum senden sie an die übrigen Empfänger*innen anders:

• Gewinnende Variante – die Standardoption für A/B-Tests, mit der 1 gewinnende Variante ermittelt und nach Ablauf des Testzeitraums an die restlichen Empfänger*innen der Kampagne gesendet wird.
• Personalisierte Varianten – verwendet KI, um nach Mustern unter den Testempfänger*innen zu suchen, die mit jeder Variante interagieren. Nachdem der Testzeitraum beendet ist, sagt Klaviyo voraus, welche Variante für jede*n Empfänger*in besser abschneiden wird, und sendet den übrigen Empfänger*innen ihre bevorzugte Variante.

Personalisierte Varianten für alle Empfänger

Wenn du personalisieren möchtest, welche Variante jede*r Empfänger*in individuell erhält, wähle Personalisierte Varianten für alle Empfänger aus.

Klaviyo verwendet Informationen zu jedem Profil, um zu bestimmen, welche Variante am ehesten erfolgreich ist, dieses Profil zu konvertieren. Diese Profilinformationen umfassen unter anderem:

• Historische Kundenengagement-Raten
• Customer Lifetime Value (CLV)
• Standort

Wenn du beispielsweise die Öffnungsrate als Gewinn-Metrik ausgewählt hast und Profile in der Testgruppe mit einem Customer Lifetime Value von 100 oder mehr Variante A häufiger öffnen, Profile mit einem Customer Lifetime Value von weniger als 100 aber Variante B häufiger öffnen, erhalten die übrigen Empfänger*innen der Kampagne E-Mails basierend darauf, welche Variante sie gemäß ihrem Customer Lifetime Value am wahrscheinlichsten öffnen. Dies ist ein vereinfachtes Beispiel, da Klaviyo viele Datenpunkte verwendet, um personalisierte Varianten zu bestimmen.

Wenn nicht genug Kundenengagement vorhanden ist, um Varianten zu personalisieren, sendet Klaviyo stattdessen die erfolgreiche Variante an die verbleibenden Empfänger*innen.

A/B-Test-Einstellungen konfigurieren

Nachdem du deine Varianten konfiguriert hast, wähle die Testeinstellungen aus. Bei Inhaltstests kannst du die Testgröße anpassen und – wenn die Testgröße unter 100 % liegt – die Testdauer.

Wähle zuerst die gewinnende Metrik aus, also die wichtigste Metrik, bei der du eine Verbesserung sehen möchtest. Wähle aus:

• Öffnungsrate
  Empfohlen, wenn du Betreff, Vorschautext oder Absendername und E-Mail-Adresse testest.
• Klickrate
  Empfohlen, wenn du E-Mail-Inhalte testest, wie z. B. Schaltflächengröße oder -farbe.
• Bestellrate
  Nur für Konten mit einer Placed Order -Metrik verfügbar und nicht für personalisierte Varianten verfügbar. Das wird empfohlen, wenn du E-Mail-Inhalte testest, z. B. ob das Anzeigen von Bestsellern oder neuen Artikeln zu mehr Conversions führt.

Für Inhaltstests empfiehlt Klaviyo eine Testgröße basierend auf deiner Zielgruppengröße sowie eine Testdauer basierend auf der Gewinn-Metrik (Öffnungen, Klicks oder aufgegebene Bestellungen). Verwende den Schieberegler, um die Testgröße bei Bedarf zu ändern. Wenn die Testgröße weniger als 100 % beträgt, kannst du auch die Testdauer anpassen. Versandzeitpunkt-Tests haben eine feste Testgröße von 100 %.

Bei einem Standard-Inhaltstest mit einer Testgröße von 40 % und einer Testdauer von 6 Stunden erhalten 20 % der Empfänger*innen der Kampagne Variante A und weitere 20 % Variante B. Je nachdem, wie viele dieser Empfänger*innen öffnen, klicken oder eine Bestellung aufgeben (abhängig von der Gewinn-Metrik, die du ausgewählt hast), wird nach 6 Stunden ein*e Gewinner*in ausgewählt, und die restlichen Empfänger*innen erhalten die Gewinnervariante.

Plane den Versand deines Tests oder versende ihn direkt.

Folge diesen Schritten, um deinen Test zu senden oder zu planen:

1. Wenn du einen Inhaltstest in der jeweiligen lokalen Zeitzone der Empfänger*innen senden möchtest, lege Testgröße auf 100 % fest, bevor du fortfährst.

2. Klicke auf Weiter, um deine Kampagne zu überprüfen.
3. Überprüfe die Kampagnendetails und behebe alle Fehler. Klicke dann auf Planen oder senden.
4. Wähle für einen Inhaltstest Sofort senden oder Planen. Wenn du planst, wähle das Datum, die Uhrzeit und die Zeitzone aus. Um in der lokalen Zeitzone jeder*s Empfänger*in zu senden, wähle Lokale Zeitzone der Empfänger*innen aus. Überprüfe für einen Versandzeitpunkt-Test die Daten und Uhrzeiten, die bereits für jede Variante festgelegt wurden.

5. Klicke je nach Bedarf auf Jetzt senden oder Nachricht planen, um zu bestätigen.

Was sollte bei einem A/B-Test getestet werden?

Du solltest immer nur eine Variable gleichzeitig testen. Wenn du mehrere Variablen gleichzeitig testest, kann es schwierig (oder unmöglich) werden, zu erkennen, welche Variablen zu einer besseren Performance beitragen. Du weißt nicht, was du testen sollst? Klicke auf die unten stehenden Abschnitte, um dir Ausgangspunkte anzusehen.

A/B-Testergebnisse prüfen und eine*n Gewinner*in auswählen (optional)

Öffne die Kampagne, um die Performance jeder Variante zu vergleichen und ihre Gewinnwahrscheinlichkeit zu prüfen. Um einen laufenden Content-Test vorzeitig zu beenden und manuell einen Gewinner auszuwählen, muss die Testgröße unter 100 % liegen, damit einige Empfänger*innen übrig bleiben, die den Gewinner erhalten.

Wenn du eine*n Gewinner*in auswählst, wird der Test beendet und die verbleibenden Empfänger*innen erhalten diese Variante sofort.

1. Navigiere zum Tab A/B-Test-Ergebnisse der Kampagne.
2. Klicke auf das Menü für weitere Optionen neben der Version, die du auswählen möchtest.
3. Klicke auf Als Gewinner wählen.
4. Klicke im Bestätigungsfenster auf Gewinner*in auswählen.

Wenn die Größe deines A/B-Tests bei 100 % der Empfänger*innen lag, gibt es keinen späteren Versand der Gewinner-Variante. Der gemeldete Gewinner kann sich ändern, wenn neue Kundenengagement-Daten eingehen. Weitere Informationen findest du unter So überprüfst du die Ergebnisse deines E-Mail-A/B-Tests für Kampagnen.

Weitere Ressourcen