Jak przeprowadzić test A/B formularza rejestracyjnego

Czego się dowiesz?

Dowiedz się, jak korzystać z Testów A/B, aby ocenić skuteczność różnych elementów formularza rejestracyjnego. Skutecznie analizując wyniki, możesz mieć pewność, że formularze przemówią do odwiedzających witrynę i przyczynią się do rozwoju listy.

Przygotowanie do testu A/B

Zanim zaczniesz tworzyć test A/B, weź pod uwagę te ogólne wskazówki:

• Testuj 1 zmienną na raz (np. ofertę kuponu)
  • Skup się na zmianie jednej zmiennej (elementu) naraz, na przykład kuponu, aby jasno ocenić jej wpływ.
• Zacznij od małej liczby wariantów testowych
  • Podczas testowania zmiennej (np. oferty kuponu) zacznij od 2 wariantów, aby zmierzyć skuteczność. Możesz zwiększać złożoność w kolejnych testach, gdy będziesz zbierać więcej danych, ale celuj w maksymalnie 4 warianty, aby uzyskać wiarygodne wyniki przy mniejszym ruchu.
• Unikaj zmian w trakcie testu
  • Unikaj zmieniania ustawień testu, gdy test jest aktywny, więc wcześniej potwierdź swoje ustawienia. Nie możesz edytować treści uruchomionych wariantów. Aby przygotować zmiany treści, utwórz kopię roboczą testu; obecny test pozostanie aktywny, dopóki nie opublikujesz nowego.
• Zadbaj o odpowiednio długi czas testów
  • Poczekaj na statystycznie istotne wyniki lub do momentu, gdy masz wystarczającą wielkość próby odbiorców, aby zakończyć test. Pamiętaj, że większa liczba wariantów wymaga większego ruchu, aby uzyskać wiarygodne wyniki.
• Zrozum istotność statystyczną
  • Zapoznaj się z tym, jak istotność statystyczna wpływa na wyniki testu A/B.

Co testować w ramach testu A/B

Tworzenie testu A/B

Tworzenie testu

Istnieją 2 różne sposoby tworzenia testu A/B dla formularza rejestracyjnego:

• Na karcie formularz rejestracyjny kliknij menu rozwijane z 3 kropkami obok formularza, który chcesz przetestować, i wybierz Utwórz test A/B.
• Otwórz edytor formularza formularza rejestracyjnego, który chcesz przetestować. Wybierz Utwórz test A/B na lewym pasku bocznym, a następnie kliknij Utwórz test A/B w panelu.

Niezależnie od tego, skąd wejdziesz:

1. W oknie Utwórz test wybierz Test A/B, jeśli pojawi się selektor typu testu.

2. Następnie nadaj testowi opisową nazwę. Jeśli testujesz kolory przycisków w wyskakującym okienku zapisu do newslettera, możesz nazwać test Newsletter — kolor przycisku Prześlij.
3. Po nadaniu nazwy testowi A/B nadaj różne nazwy wariantom formularza rejestracyjnego, aby móc je odróżnić.
   • Domyślnie będzie mieć nazwę Kopia nr nazwy formularza. W przypadku przykładu z innym kolorem przycisku przesyłania z wcześniejszej części formularze mogą mieć nazwy Newsletter – niebieski i Newsletter – szary.
   • Tutaj możesz też dodać więcej wariantów, wybierając przycisk Kopiuj. Twój test A/B może zawierać łącznie maksymalnie 7 wariantów. Pamiętaj, że im więcej dodasz wariantów, tym dłużej musisz prowadzić test. Idealny test A/B powinien mieć od 2 do 4 wariantów. W poniższym przykładzie są trzy warianty: oryginalny formularz i dwa dodatkowe testy.
4. Po skonfigurowaniu testu wybierz Utwórz test.
   

Konfigurowanie wariantów

Po utworzeniu testu zostaniesz przeniesiony(-a) z powrotem do edytora formularza rejestracyjnego. W panelu Utwórz test A/B wybierz literę wariantu (A, B itd.), aby go edytować. Użyj pola nazwy, ikony kopiowania lub ikony usuwania obok wariantu, aby zmienić jego nazwę, zduplikować go lub usunąć.

Aby znaleźć inspiracje, zobacz sekcję Co testować A/B.

Gdy skończysz konfigurować formularz, wybierz Kontynuuj, aby przetestować ustawienia.

Konfigurowanie ustawień testu A/B

Na stronie ustawień testu możesz dostosować:

• Nazwy wariantów
• Wybór ruchu (waga)
• Wybór zwycięzcy
• Uwagi

W przypadku testu w toku możesz też wybrać swój formularz na stronie formularze rejestracyjne, a następnie wybrać wyniki testu A/B > edytuj test A/B.

Wybór ruchu

W tej sekcji można określić, jaka część ruchu trafia do wariantów formularza. Domyślnie każdy formularz będzie wyświetlany równej liczbie odbiorców. W trakcie trwania testu, jeśli jeden z wariantów przewyższa pozostałe, Klaviyo skieruje ruch do lepiej działającego formularza, podczas gdy test nadal trwa.

Włącz Ręcznie ustaw ruch, aby określić procent ruchu kierowanego do każdego wariantu. Gdy zmienisz wartość procentową, Klaviyo dostosuje pozostałe wartości procentowe tak, aby suma nadal wynosiła 100%.

Wybór zwycięzcy

Podobnie jak w sekcji wyboru ruchu, masz 2 opcje określenia sposobu wyboru zwycięzcy testu. Test możesz zakończyć automatycznie lub ręcznie.

• Automatycznie
  Jeśli zakończysz test automatycznie, zakończy się on, gdy 1 wariant przewyższy pozostałe na statystycznie istotnym poziomie lub gdy osiągnie określoną datę. Można też zaznaczyć oba pola, a test zakończy się, gdy zostanie spełniony 1 z warunków. Na przykład, jeśli zaznaczone są oba warunki, a formularz ma działać tylko przez miesiąc, jeśli formularz będzie mieć statystycznie istotne wyniki po tygodniu, test się zakończy.
  • Jeśli zakończysz test w momencie, gdy same wyniki będą statystycznie istotne, model data science Klaviyo wykona obliczenia i wybierze zwycięzcę.
  • Jeśli zdecydujesz się zakończyć test w konkretnym dniu, test zakończy się o północy czasu uniwersalnego koordynowanego (UTC).
• Ręcznie
  Jeśli zdecydujesz się zakończyć test ręcznie (odznacz oba pola), wybierzesz zarówno zwycięzcę, jak i datę zakończenia testu.

Niezależnie od wybranego automatycznego wyboru, po zakończeniu testu formularz, który wygra, będzie aktywny w Twojej witrynie.

1. Wybierz Opublikuj test A/B, gdy skończysz edytować ustawienia testu.
2. Przejrzyj w oknie potwierdzenia kontrole instalacji i zawartości, w tym wszelkie sformułowania dotyczące zgody lub problemy z polami formularza. Jeśli Twój test obejmuje osadzony formularz, upewnij się, że jego kod osadzenia jest zainstalowany w miejscu, w którym formularz ma się pojawić.
3. Wybierz Opublikuj, aby rozpocząć test.

Sprawdź wyniki testu A/B

Gdy test jest uruchomiony lub po jego zakończeniu, możesz monitorować dane na swoim koncie. Przejdź do Formularze rejestracyjne, a następnie wybierz formularz. Na karcie Przegląd możesz sprawdzić, jak ogólnie działa formularz. Wybierz kartę Wyniki testu A/B, aby przejść do analiz dotyczących testu A/B.

W przypadku trwającego testu możesz też edytować ustawienia testu A/B. Aby to zrobić, wybierz Edytuj test A/B w prawym górnym rogu karty wyników testu A/B. Tutaj możesz edytować ustawienia testu (np. nazwę, wagę wariantu, ustawienia wyboru zwycięzcy).

Nie możesz zmienić treści działających wariantów. W sekcji Ustawienia testu A/B wybierz Edytuj treść, wpisz nazwę nowego testu i wybierz Kontynuuj, aby utworzyć kopię roboczą. Obecny test pozostaje aktywny, gdy edytujesz kopię. Gdy opublikujesz nowy test, zastąpi on obecny test.

Przegląd testu

W sekcji Przegląd znajdziesz migawkę tego, jak wypada Twój test. Użyj listy rozwijanej testu nad tą sekcją, aby przełączać się między bieżącymi i poprzednimi testami A/B. Metryki wyświetlane w sekcji Przegląd obejmują:

• Prawdopodobieństwo wygranej
  Prawdopodobieństwo wygranej wyświetla się w górnej lewej karcie. Ten procent szacuje prawdopodobieństwo, że wskaźnik wypełnień formularza wiodącego wariantu jest naprawdę wyższy niż wskaźniki pozostałych wariantów. Może rosnąć lub spadać, gdy zbierane są kolejne dane. Etykieta pod prawdopodobieństwem wygranej pokazuje, czy wyniki są istotne statystycznie. W przypadku ukończonego testu w podsumowaniu widać też, czy zakończył się automatycznie, czy ręcznie.
• Data rozpoczęcia i Data zakończenia
  Daty rozpoczęcia i zakończenia testu są wyświetlane na karcie w prawym górnym rogu. Gdy test jest uruchomiony, pole Data zakończenia pokazuje tekst zastępczy, nawet jeśli ustawisz datę zakończenia. Gdy test się zakończy, wyświetla rzeczywistą datę i godzinę zakończenia.

Pod tymi kartami wyświetlane są nieprzetworzone dane z każdego wariantu formularza w Twoim teście. Obok każdego wariantu możesz zobaczyć zestawienie następujących metryk według wariantu:

• Bieżąca waga
  Ta metryka odzwierciedla bieżącą wagę ruchu kierowanego do każdego formularza. Jeśli ręcznie wybierasz, ile ruchu trafia do każdego formularza, te liczby będą spójne z Twoimi bieżącymi ręcznymi ustawieniami ruchu. Jeśli korzystasz z modelu data science Klaviyo, zobaczysz, jak waga ruchu zmienia się w czasie, przydzielając więcej ruchu formularzowi, który wygrywa, i pozwalając Ci pozyskać więcej subskrybentów podczas prowadzenia testu.
• Zamówienia
  Liczba złożonych zamówień przypisanych do tego formularza.
• Średnia wartość zamówienia (średnia wartość zamówienia)
  Przychody ze sklepu powiązane z tym formularzem podzielone przez liczbę zamówień powiązanych z formularzem.
• Przychód
  Suma wartości złożonych zamówień powiązanych z tym formularzem w skonfigurowanym oknie retrospektywnym. Ustawienia przychodu formularza określają, czy przychód jest powiązany po przesłaniu kroku przez odwiedzającego lub po przejściu do kroku sukcesu.

• Unikalne wyświetlenia
  Liczba unikalnych użytkowników, którzy wyświetlili wariant formularza rejestracyjnego (np. jeśli 1 odwiedzający witrynę wyświetli formularz dwa razy, liczy się to jako 1 wyświetlenie).
• Unikatowe wysłania
  Liczba unikatowych użytkowników, którzy wysyłają wariant formularza rejestracyjnego lub klikają przycisk "Przejdź do URL" (np. jeśli 1 odwiedzający witrynę wyśle formularz 2 razy, liczy się to jako 1 wysłanie). Jeżeli formularz ma zarówno przycisk przesyłania, jak i przycisk „Przejdź do adresu URL”, zdarzenie zostanie zliczone tylko wtedy, gdy ktoś prześle formularz.
• Współczynnik przesłań
  Wartość Unikalne przesłania podzielona przez liczbę Unikalne wyświetlenia. Ponieważ ten współczynnik używa unikalnych metryk, może się różnić od Współczynnika przesłań na karcie Przegląd, gdzie używane są sumy.

Wykres wskaźnika wypełnień formularza

Pod surowymi danymi znajduje się wykres wariantów, pokazujący wskaźnik wypełnień formularza według wariantu w trakcie trwania testu A/B. Jeśli interesuje Cię konkretna data, najedź kursorem na punkty danych, aby uzyskać więcej informacji.

Wskaźniki zaangażowania

Jeśli przeprowadzasz test A/B w formularzu wieloetapowym, zobaczysz podział wskaźników zaangażowania dla każdego etapu formularza w każdym wariancie — dzięki temu zrozumiesz, na którym etapie odwiedzający stronę mogą porzucać formularz. Tutaj możesz przeanalizować:

• Wskaźnik zaangażowania w kroku 1
  Ta metryka odzwierciedla odsetek użytkowników, którzy zaangażowali się w pierwszy krok wariantu formularza rejestracyjnego.
• Użytkownicy, którzy ukończyli wszystkie kroki
  Ta metryka odzwierciedla odsetek użytkowników, którzy zaangażowali się w każdy krok wariantu formularza rejestracyjnego.

Pod tymi danymi znajduje się wykres współczynnika ukończenia kroku według wariantu, dzięki któremu możesz zwizualizować wskaźniki zaangażowania dla każdego kroku i porównać wskaźniki między wariantami formularza w teście A/B.

Często zadawane pytania

Mam powiadomienie, że mój test A/B z opóźnieniem czasowym inaczej oblicza wskaźnik wypełnień formularza. Dlaczego tak się dzieje?

Jeśli testujesz opóźnienie czasowe w formularzu, wskaźnik wypełnień formularza będzie obliczany na podstawie konwersji unikalnych użytkowników, którzy kwalifikują się do zobaczenia Twojego formularza (Kwalifikujące się unikalne wyświetlenia), a nie liczby unikalnych odwiedzających, którzy faktycznie wyświetlili formularz.

Załóżmy na przykład, że test A/B ma równą wagę i zawiera komunikat „Potrzebujesz pomocy w przeglądaniu?”. W teście 1 formularz wyświetla się od razu po wejściu na witrynę, a drugi formularz ładuje się po minucie. Chociaż taka sama liczba osób zostanie ustawiona w kolejce, aby zobaczyć oba formularze, więcej osób zobaczy formularz, który wyświetla się od razu. Chociaż nie będzie tak wielu osób, które zobaczą formularz z opóźnieniem, oferuje on pomoc zdezorientowanym kupującym, a więc nadal może mieć wyższy wskaźnik wypełnień formularza. Aby sprawdzić, czy opóźnienie formularza prowadzi do wyższego czy niższego wskaźnika przesłań, wskaźnik wypełnień formularza nie będzie liczbą przesłań jako procentem liczby wyświetleń, ale raczej liczbą przesłań jako procentem liczby osób, które mogły zobaczyć formularz.

Zaznaczyłem(-am) oba pola w sekcji wyboru zwycięzcy w moim teście A/B. Czy test zakończy się, gdy spełnione zostaną oba warunki, czy wystarczy spełnienie jednego z nich?

Te pola wyboru działają jako warunek OR, co oznacza, że można spełnić jeden z warunków, a test zostanie zatrzymany. Nie trzeba spełnić obu warunków, aby test został zatrzymany.

Czy mogę edytować ustawienia testu dla mojego testu A/B formularza po jego uruchomieniu?

Tak. Otwórz wyniki testu A/B formularza i wybierz Edytuj test A/B, aby zmienić ustawienia. Aby zmienić zawartość formularza, wybierz Edytuj zawartość, aby utworzyć kopię roboczą. Bieżący test pozostanie aktywny do momentu opublikowania nowego testu.

Jeśli ktoś nie wejdzie w interakcję z formularzem, który jest częścią testu A/B, to gdy formularz wyświetli mu się po raz drugi, czy zobaczy inną wersję formularza?

Klaviyo korzysta z zapisanych danych przeglądarki, aby podczas testu ponownie wyświetlić ten sam wariant. Odwiedzający może zobaczyć inny wariant, jeśli te dane zostaną wyczyszczone lub będą niedostępne, na przykład w nowej sesji przeglądania prywatnego.

Gdy tworzę test A/B dla formularza, czy formularz przejdzie w tryb wersji roboczej?

Formularz pozostanie w takim stanie, w jakim był przed utworzeniem testu. Jeśli był w trybie na żywo i utworzysz test A/B, bieżąca wersja będzie na żywo. Jeśli był w wersji roboczej, formularz będzie w trybie wersji roboczej.

W moim teście A/B formularza był błąd literowy, więc opublikowałem(-am) nowy. Jak mogę trwale usunąć test z błędem literowym?

Usunięcie wyników testu jest nieodwracalne. Otwórz wyniki testu A/B swojego formularza i wybierz ukończony test z listy rozwijanej testów. Otwórz menu strzałki obok opcji Edytuj szczegóły, wybierz Usuń wyniki testu, a następnie wybierz Usuń test A/B, aby potwierdzić.

Włączyłem(-am) test A/B formularza, a potem zauważyłem(-am) literówkę. Nie chcę zatrzymywać testu, tworzyć go od nowa i ponownie go włączać. Co należy zrobić?

1. W wynikach testu A/B Twojego formularza wybierz Edytuj test A/B, a następnie Edytuj treść.
2. Wpisz nazwę nowego testu i wybierz Kontynuuj.
3. Edytuj tekst wersji roboczej. Użyj liter wariantów w nagłówku edytora, aby przełączać się między wariantami.
4. W nagłówku edytora wybierz Kontynuuj, aby przetestować ustawienia, aby przejrzeć ustawienia.
5. Wybierz Opublikuj test A/B i potwierdź, klikając Opublikuj. Twój pierwotny test pozostanie aktywny do momentu opublikowania zamiennika.

Jeden z moich wariant formularza wypada bardzo słabo i chcę zaktualizować ilość ruchu kierowanego do formularza. Czy mogę to zrobić?

Tak. Otwórz wyniki testu A/B swojego formularza i wybierz Edytuj test A/B. Włącz Ustaw ruch ręcznie, aby zmienić wartości procentowe, lub wyłącz, aby Klaviyo dostosowywało ruch na podstawie wyników.

Chcę przetestować, czy różne oferty mają większą szansę na konwersję. Jak mieć pewność, że do każdego formularza zostanie przypisana inna sekwencja powitalna?

Możesz dostosować listę, do której zapisuje się dana osoba dla każdego wariantu. Aby każdy wariant trafiał na inne listy, kliknij przycisk CTA w formularzu i zmień List to Submit w sekcji Button click action. Stamtąd uruchom sekwencję sekwencji powitalnej na podstawie dołączenia przez kogoś do listy każdego wariantu i wyślij wiadomość uzupełniającą z powiązaną ofertą.

Chcę śledzić, kto przesyła każdy wariant formularza w teście A/B. Jak mogę to zrobić?

Są dwa sposoby na identyfikację osób, które przesyłają każdy wariant. Możesz dostosować listę, do której dana osoba się zapisuje lub dodać ukryte pole do jej profilu, gdy prześle formularz. Te metody nie identyfikują wszystkich osób, które tylko wyświetlą wariant. Aby użyć osobnych list, wybierz przycisk przesyłania każdego wariantu i zmień opcję Lista do przesłania w sekcji Działanie po kliknięciu przycisku. Aby użyć ukrytego pola, dodaj właściwość w sekcji Prześlij ukryte pola i ustaw dla niej inną wartość dla każdego wariantu. Następnie utwórz segment na podstawie właściwości i wartości.

Dodatkowe źródła