Wie man ein Anmeldeformular A/B testet

Du wirst lernen

Lerne, wie du mit A/B-Tests die Leistung der verschiedenen Elemente deines Anmeldeformulars bewerten kannst. Wenn du die Ergebnisse effektiv analysierst, kannst du sicherstellen, dass deine Formulare bei den Website-Besuchern ankommen und zum Listenwachstum beitragen. 

Vorbereitungen für deinen A/B-Test

Bevor du mit der Erstellung deines A/B-Tests beginnst, solltest du diese allgemeinen Richtlinien beachten:

• Teste jeweils 1 Variable (z. B. das Gutscheinangebot)
  • Konzentriere dich darauf, jeweils eine einzelne Variable (Element) zu ändern, z. B. einen Gutschein, um die Auswirkungen klar zu beurteilen.
• Fang klein an mit test Variante
  • Wenn du eine Variable testest (z.B. das Gutscheinangebot), beginne mit 1 oder zwei Varianten, um die Wirksamkeit zu messen. Du kannst die Komplexität in späteren Tests erhöhen, wenn du mehr Daten sammelst, aber du solltest nicht mehr als 4 verwenden.
• Vermeide Änderungen während des Tests
  • Ändere die Testeinstellungen nicht, während der Test live ist. Beachte, dass du das Formular Variante selbst nicht mehr bearbeiten kannst, sobald ein Test live ist; du musst den Test beenden, um diese Art von Änderungen vorzunehmen, also bestätige alle Konfigurationen vorher. 
• Erlaube eine lange Testdauer
  • Warte auf statistisch signifikante Ergebnisse oder bis du eine ausreichende Anzahl von Zuschauern hast, um deinen Test zu beenden. Denke daran, dass mehr Varianten mehr Traffic für zuverlässige Ergebnisse erfordern. 
• Statistische Signifikanz verstehen
  • Mache dich damit vertraut, wie sich die statistische Signifikanz auf die Ergebnisse eines A/B-Tests auswirkt.

Was man A/B testen sollte

Einen A/B-Test erstellen

Einen Test erstellen

Es gibt 2 verschiedene Möglichkeiten, einen A/B-Test für dein Anmeldeformular zu erstellen:

• Klicke auf der Registerkarte Anmeldeformular auf das 3-Punkte-Dropdown-Menü neben dem Formular, das du testen möchtest, und wähle A/B-Test erstellen.
• Öffne den Formulareditor für ein Anmeldeformular, das du testen möchtest, und wähle oben in der Ecke A/B-Test erstellen. 

Egal, von wo aus du einsteigst:

1. Wähle A/B-Test erstellen, um loszulegen.
   
2. Als Nächstes solltest du deinem Test einen aussagekräftigen Namen geben. Wenn du die Farben der Schaltflächen in deinem Newsletter-Popup testest, könntest du den Test Newsletter - Color of Submit Button nennen.
3. Nachdem du deinen A/B-Test benannt hast, kannst du deiner Anmeldeformular-Variation verschiedene Namen geben, indem du auf das Bleistift-Symbol neben dem aktuellen Namen deines Formulars klickst.
   • Standardmäßig wird es mit dem Namen Copy # of Name of Form geliefert. Mit dem Beispiel der verschiedenfarbigen Sendebuttons von vorhin könntest du deine Formulare Newsletter - Blau und Newsletter - Grau nennen.
   • Hier kannst du auch bis zu 7 Variationen zu deinem A/B-Test hinzufügen. Denk daran: Je mehr Variationen du hinzufügst, desto länger brauchst du für die Durchführung deines Tests. Ein idealer A/B-Test besteht aus zwei bis vier Variationen. In dem folgenden Beispiel gibt es drei Variationen: die ursprüngliche Form und die 2 zusätzlichen Tests.
4. Nachdem du deinen Test konfiguriert hast, wähle Test erstellen.

Konfigurieren der Variation

Nachdem du deinen Test erstellt hast, wirst du zurück zum Editor für das Anmeldeformular geleitet. Du kannst zwischen den verschiedenen Varianten deines Formulars umschalten, indem du den Namen deines Formulars auswählst. In diesem Menü kannst du auch den Namen der Variation ändern, eine zusätzliche Variation erstellen oder die Variation löschen.

Im Abschnitt A/B-Tests findest du Anregungen.

Wenn du mit der Konfiguration deines Formulars fertig bist, wähle Weiter zu Testeinstellungen.

Einstellungen für A/B-Tests konfigurieren

Du kannst die Seite mit den Testeinstellungen auf 2 verschiedene Arten erreichen. Das kannst du:

• Klicke im Anmeldeformular-Editor auf die Schaltfläche Weiter zu den Testeinstellungen.
• Wähle dein Formular auf der Anmeldeformularseite aus und navigiere dann zu A/B-Testergebnisse > Test bearbeiten. Die anpassbaren Einstellungen deines Tests werden hier angezeigt. Erwäge eine Anpassung:
  • Variation Namen
  • Verkehrsauswahl (Gewicht)
  • Auswahl des Gewinners
  • Anmerkungen

Auswahl des Verkehrs

In diesem Abschnitt kannst du bestimmen, wie viel Traffic auf die Variante deines Formulars geht. In der Standardeinstellung wird jedes Formular für die gleiche Anzahl von Zuschauern angezeigt. Wenn eine deiner Variationen während des Tests besser abschneidet als die anderen, leitet Klaviyo den Datenverkehr auf die leistungsstärkere Form um, während der Test noch läuft.

Wenn du Umschalter auf Gewicht - Manuell wählst, kannst du angeben, wie viel Traffic du für jede Variante des Formulars haben möchtest. Die Beträge müssen sich zu 100% summieren.

Auswahl des Gewinners

Ähnlich wie bei der Verkehrsauswahl hast du 2 Möglichkeiten, wie du den Gewinner des Tests auswählen kannst. Du kannst den Test automatisch oder manuell beenden.

• Automatisch
  Wenn du deinen Test automatisch beendest, endet er, wenn es eine Variante gibt, die die anderen statistisch signifikant übertrifft, oder wenn ein bestimmtes Datum erreicht wird. Du kannst auch beide Kästchen auswählen und der Test endet, wenn eine der Bedingungen erfüllt ist. Wenn du zum Beispiel beide Bedingungen ausgewählt hast und dein Formular nur einen Monat lang läuft, wird der Test beendet, wenn das Formular nach einer Woche statistisch signifikante Ergebnisse aufweist.
  • Wenn du deinen Test beendest, wenn die Ergebnisse allein statistisch signifikant sind, rechnet das Data-Science-Modell von Klaviyo für dich und kürt einen Gewinner.
  • Wenn du dich dafür entscheidest, den Test an einem bestimmten Datum zu senden, endet der Test um Mitternacht koordinierter Weltzeit (UTC).
• Manuell
  Wenn du dich dafür entscheidest, deinen Test manuell zu beenden (beide Kästchen deaktivieren), wählst du sowohl den Gewinner als auch das Datum, an dem der Test endet. 

Unabhängig davon, welche automatische Auswahl du triffst, wird das Formular, das den Test gewinnt, nach Abschluss des Tests auf deiner Website veröffentlicht.

Klicke auf A/B-Test veröffentlichen , sobald du die Testeinstellungen bearbeitet hast. Bevor dein Test beginnt, prüft Klaviyo, ob es ein Problem bei der Veröffentlichung von Formularen auf deiner Website gibt und ob dein Formular alle erforderlichen Inhalte enthält (z. B. Einverständniserklärung, CTA, Sendefelder usw.).

A/B-Testergebnisse überprüfen

Während der Test läuft oder nachdem du deinen A/B-Test abgeschlossen hast, kannst du die Daten in deinem Konto überwachen. Navigiere zu Anmeldeformular und wähle dann dein Formular aus. Auf der Registerkarte Übersicht kannst du sehen, wie dein Formular insgesamt abschneidet. Wähle die Registerkarte A/B-Testergebnisse, um in die Analysen deines A/B-Tests einzutauchen.

Von hier aus kannst du auch die Einstellungen für deinen A/B-Test bearbeiten. Wähle dazu oben rechts auf der Registerkarte mit den A/B-Test-Ergebnissen die OptionA/B-Test bearbeiten . Hier kannst du die Testeinstellungen bearbeiten (z. B. Name, Variationsgewicht, Einstellungen für die Gewinnerauswahl).

Du kannst den Inhalt der Testformulare nicht ändern, während der Test durchgeführt wird. Um den Inhalt zu bearbeiten, klicke auf Inhalt bearbeiten, um den Test zu beenden, klone einen neuen Test zum Bearbeiten und beginne erneut. 

Test Übersicht

Unter Übersicht erhältst du eine Momentaufnahme der Leistung deines Tests. Du kannst das Dropdown in der oberen linken Ecke verwenden, um die verschiedenen Variationen in deinem A/B-Test umzuschalten. Die Metrik, die in der Übersicht gezeigt wird, umfasst: 

• Gewinnwahrscheinlichkeit
  Die Gewinnwahrscheinlichkeit wird auf der Karte oben links angezeigt. Dieser Prozentsatz gibt die Wahrscheinlichkeit an, dass die aktuelle Variante, die gerade gewinnt, statistisch gesehen der Gewinner ist. Je mehr Zuschauer dein Test hat und je länger er läuft, desto höher sollte diese Zahl sein. Wenn die Testergebnisse statistisch signifikant sind, erkennst du das an der Beschriftung unter der Gewinnwahrscheinlichkeit. Wenn du einen abgeschlossenen Test ansiehst, wird auch ein Grund angegeben, warum der Test beendet wurde (z. B. weil er manuell durch die Wahl eines Gewinners beendet wurde).
• Startdatum und Enddatum
  Das Start- und Enddatum für den Test sind auf der Karte oben rechts aufgeführt. Wenn du kein Enddatum festgelegt hast, bleibt dieses Feld leer. Wenn der Test abgeschlossen ist, siehst du das Datum, an dem der Gewinner ausgewählt wurde.

  Wenn du den Test jederzeit manuell beenden und einen Gewinner auswählen möchtest, wähle die Schaltfläche Gewinner auswählen.

Unter diesen Karten werden die Rohdaten von jeder Formvariante in deinem Test angezeigt. Neben jeder Variation siehst du eine Aufschlüsselung der folgenden Metrik nach Variation:

• Aktuelles Gewicht
  Diese Metrik zeigt das aktuelle Gewicht des Datenverkehrs an, der auf jedes Formular geleitet wird. Wenn du manuell ausgewählt hast, wie viel Traffic auf jedes Formular geht, stimmen diese Zahlen mit den Einstellungen überein, die du beim Start des Tests gewählt hast. Wenn du das Data-Science-Modell von Klaviyoverwendest, wirst du sehen, wie sich die Gewichtung des Traffics im Laufe der Zeit ändert, sodass das Formular, das gewinnt, mehr Traffic erhält und du im Laufe deines Tests mehr Abonnenten gewinnen kannst.
• Bestellungen
  Die Anzahl der Bestellungen, die diesem Formular zugeordnet sind.
• Durchschnittlicher Bestellwert(Average Order Vale [AOV])
  Der mit diesem Formular verbundene Ladenumsatz geteilt durch die Anzahl der mit dem Formular verbundenen Bestellungen.
• Umsatz
  Die Summe der getätigten Bestellungen ($), die nach der Übermittlung eines Formulars innerhalb des Rückblickfensters erfolgt sind.
  

  Mehr darüber, wie der Umsatz mit Anmeldeformularen verknüpft ist, erfährst du unter Umsatzkennzahlen für Formulare verstehen.

• Eindeutige Aufrufe
  Die Anzahl der eindeutigen Nutzer/innen, die eine Anmeldeformular-Variation angesehen haben (wenn z. B. ein/e Website-Besucher/in dein Formular zweimal ansieht, zählt das als 1 Ansicht).
• Einzigartige Übermittlungen
  Die Anzahl der eindeutigen Benutzer, die eine Anmeldeformular-Variante abschicken oder auf eine Schaltfläche „Zu URL wechseln“ klicken (z.B. wenn 1 Besucher*in dein Formular zweimal abschickt, zählt dies als einmal). Wenn das Formular sowohl eine Schaltfläche „Formular abschicken“ als auch eine Schaltfläche „Zur URL wechseln“ enthält, wird das Ereignis nur gezählt, wenn jemand das Formular absendet.
• Übermittlungsrate
  Der Wert des einmalig übermittelten Formulars geteilt durch die Anzahl der einmaligen Aufrufe. Da diese Rate eine eindeutige Metrik verwendet, unterscheidet sie sich von der Rate Senden auf der Registerkarte Übersicht, die Summen verwendet. 

Grafik der Formularabschlussrate

Unter den Rohdaten befindet sich ein Diagramm deiner Variation, das die Formularabschlussrate nach Variation über die Dauer des A/B-Tests anzeigt. Wenn du dich für ein bestimmtes Datum interessierst, fahre mit dem Mauszeiger über die Datenpunkte, um weitere Informationen zu erhalten.

Kundenbindungsraten

Wenn du einen A/B-Test mit einem mehrstufigen Formular durchführst, gibt es eine Aufschlüsselung der Kundenbindungsraten für die einzelnen Schritte des Formulars pro Variante, damit du verstehst, wo die Website-Besucher das Formular möglicherweise abbrechen. Hier kannst du sie analysieren:

• Schritt 1 Kundenbindungsrate
  Diese Metrik spiegelt den Prozentsatz der Nutzer wider, die sich mit dem ersten Schritt der Anmeldeformularvariante beschäftigt haben.
• Nutzer/innen, die alle Schritte abgeschlossen haben
  Diese Metrik gibt den Prozentsatz der Nutzer/innen an, die sich mit jedem Schritt der Anmeldeformular-Variante beschäftigt haben. 

Unterhalb dieser Daten befindet sich ein Diagramm mit der Schrittabschlussrate nach Variationen, so dass du die Kundenbindungsraten pro Schritt visualisieren und die Raten zwischen den Formularvariationen im A/B-Test vergleichen kannst.

FAQs

Ich habe eine Benachrichtigung, dass mein Formular, das einen zeitverzögerten A/B-Test hat, die Formularabschlussrate anders berechnet. Warum ist das so?

Wenn du eine Zeitverzögerung für dein Formular testest, wird deine Formularabschlussrate anhand der Umrechnung der eindeutigen Nutzer berechnet, die dein Formular sehen konnten(wählbare eindeutige Ansichten), und nicht anhand der Gesamtzahl der Ansichten des Formulars.

Angenommen, dein A/B-Test ist gleichmäßig gewichtet und enthält die Nachricht "Brauchst du Hilfe beim Surfen?" Im Test wird ein Formular sofort angezeigt, wenn jemand deine Seite besucht, und das andere Formular wird nach einer Minute geladen. Obwohl die gleiche Anzahl von Personen in der Warteschlange steht, um beide Formulare zu sehen, werden mehr Personen das Formular sehen, das sofort angezeigt wird. Es werden zwar nicht so viele Menschen das Formular mit der Verzögerung sehen, aber es bietet verwirrten Käufern eine Hilfe und könnte daher noch eine höhere Formularabschlussrate haben. Um zu testen, ob die Verzögerung des Formulars zu einer höheren oder niedrigeren Abschlussrate führt, wird die Formularabschlussrate nicht als Prozentsatz der Anzahl der Aufrufe, sondern als Prozentsatz der Personen, die das Formular gesehen haben könnten, angegeben.

Ich habe beide Kästchen für den Teil der Gewinnerauswahl in meinem A/B-Test ausgewählt. Endet der Test, wenn beide oder eine der Bedingungen erfüllt sind?

Diese Kontrollkästchen funktionieren als ODER-Bedingung, d.h. wenn eine der beiden Bedingungen erfüllt ist, wird der Test abgebrochen. Beide Bedingungen müssen nicht erfüllt sein, damit der Test beendet wird.

Kann ich die Testeinstellungen für meinen A/B-Test bearbeiten, nachdem er bereits gelaufen ist?

Ja, klicke von deinem Formular aus in deinen A/B-Test und wähle A/B-Test bearbeiten, um die Einstellungen zu ändern. Du kannst den Inhalt der Formulare jedoch nicht ändern, ohne den aktuellen Test zu beenden und einen neuen zu beginnen.

Wenn jemand ein Formular, das Teil eines A/B-Tests ist, nicht ausfüllt, wird ihm dann beim zweiten Mal eine andere Version des Formulars angezeigt?

Nein, sie werden beim ersten Aufrufen des Formulars gecooked und sehen immer nur diese Variante, es sei denn, sie löschen ihr Cookie oder surfen in einem anonymen Browser.

Wenn ich einen A/B-Test für mein Formular erstelle, wird mein Formular dann in den Entwurfsmodus versetzt?

Das Formular bleibt in dem Zustand, in dem es sich befand, bevor du den Test erstellt hast. Wenn es der Live-Modus war und du einen A/B-Test erstellst, wird die aktuelle Version live sein. Wenn es im Entwurfsmodus war, wird das Formular im Entwurfsmodus sein.

Ich hatte einen Tippfehler in meinem Formular-A/B-Test, also habe ich einen neuen veröffentlicht. Wie kann ich den Test mit einem Tippfehler dauerhaft löschen?

Gehe zu den Ergebnissen des Tests, den du loswerden willst, indem du auf dem Formular wählst und zu A/B-Test-Einstellungen gehst und dann Test löschen wählst.

Ich habe meinen A/B-Test live geschaltet und dann festgestellt, dass ich einen Tippfehler hatte. Ich will den Test nicht abbrechen, ihn neu aufbauen und wieder in Betrieb nehmen. Was soll ich tun?

Gehe zur Seite mit den A/B-Test-Einstellungen, während der Test läuft, indem du in der Formularanalyse auf A/B-Test bearbeiten klickst und dann auf Inhalt bearbeiten. Dadurch wird ein neuer Entwurf für einen A/B-Test erstellt, den du bei Bedarf bearbeiten und dann mit einem Klick auf A/B-Test veröffentlichen aktivieren kannst.

Eine meiner Formularvariationen schneidet sehr schlecht ab und ich möchte die Anzahl der Besucher, die auf das Formular gehen, aktualisieren. Kann ich das tun?

Ja. Klicke auf dein Formular und gehe zu den A/B-Test-Einstellungen für dein spezielles Formular. Wähle A/B-Test bearbeiten und ändere entweder die Gewichtung oder schalte auf automatische Gewichtung um, bei der das Modell die Leistung berücksichtigt.

Ich möchte testen, ob verschiedene Angebote eine höhere Konversionswahrscheinlichkeit haben. Wie stelle ich sicher, dass ich jedem Formular einen anderen Willkommensfluss zuordne?

Du kannst die Liste, in die eine Person einreicht, für jede Variation anpassen. Damit jede Variante zu einer anderen Liste führt, klickst du auf deinen CTA-Button im Formular und änderst die Liste unter dem Abschnitt Button Click Action in Submit. Von dort aus löst du deinen Willkommensfluss aus, wenn jemand der Liste der jeweiligen Variante beitritt, und folgst mit dem entsprechenden Angebot.

Ich möchte verfolgen, wer die einzelnen Formularvarianten des A/B-Tests sieht. Wie kann ich das tun?

Es gibt 2 Möglichkeiten, wie du das machen kannst. Du kannst die Liste anpassen, an die eine Person sendet, oder du kannst ein verstecktes Feld hinzufügen, das gesendet wird, wenn jemand auf dein Formular klickt. Wenn du möchtest, dass die verschiedenen Variationen in verschiedene Listen aufgenommen werden, wähle die Schaltfläche aus und ändere die Einstellung "Liste zu senden" im Abschnitt " Schaltfläche Klicken Aktion". Wenn du über ein verstecktes Feld übermitteln möchtest, fügst du eine Eigenschaft unter dem Abschnitt Versteckte Felder übermitteln hinzu. Dann erstellst du ein Segment für jede Immobilie.

Zusätzliche Ressourcen

• Best Practices für A/B-Tests Referenz
• Kurs: Erstellen einer effektiven Akquisitionsstrategie mit dem Anmeldeformular
• Erste Schritte mit dem Anmeldeformular
• Kurs: Verbessere dein Marketing mit A/B-Test