Jak wykonać Testy A/B w sekwencji WhatsApp

Czego się dowiesz?

Nauczysz się, jak wykorzystać doświadczenie Klaviyo z Testy A/B do testowania poszczególnych wiadomości WhatsApp w sekwencji.

O sekwencji i Testy A/B

sekwencja WhatsApp Testy A/B obejmuje procesy:

1. Tworzenie pojedynczej wiadomości WhatsApp w ramach sekwencji.
2. Konfigurowanie 2 lub więcej wariantów szablonu WhatsApp przy użyciu istniejących szablonów lub korzystanie z treści w formie swobodnej. Pamiętaj, że treści w dowolnej formie nie zostaną dostarczone, jeśli odbiorca nie ma aktywnego 24‑godzinnego okna konwersacji.
3. Wybieranie wagi każdego szablonu
4. Automatyczne wybieranie zwycięskiego wariantu, gdy wyniki są istotne statystycznie lub w określonym dniu zakończenia, albo ręczne wybieranie zwycięzcy. Automatyczny wybór wykorzystuje wybrany przez Ciebie wskaźnik wyświetleń wiadomości lub wskaźnik kliknięć.

Wykonaj sekwencja testu WhatsApp A/B

Utwórz test A/B za pomocą kreatora sekwencji. Te kroki dotyczą wiadomości, które korzystają z szablonów WhatsApp. Zanim zaczniesz, wybierz szablon wiadomości, którą chcesz przetestować. Potrzebujesz uprawnień do edytowania treści sekwencji i zmiany statusu wiadomości.

Utwórz nowy test A/B

1. W kreatorze sekwencji kliknij wiadomość WhatsApp, którą chcesz przetestować.
2. Kliknij Utwórz test A/B w panelu Szczegóły WhatsApp.

Edytuj wariant

Po utworzeniu nowego testu zostaniesz przeniesiony(-a) bezpośrednio na stronę konfiguracji testu A/B. Test zaczyna się od Twojego oryginalnego szablonu jako wariantu A oraz kopii tego szablonu jako wariantu B.

Test A/B sekwencji WhatsApp może zawierać 2–25 wariantów.

1. Kliknij Wybierz szablon obok wariantu B.
2. W galerii szablonów WhatsApp wybierz istniejący szablon, który chcesz przetestować.

Uwaga: Tylko szablon może być używany jako szablon.

1. Potwierdź swój wybór, klikając Użyj szablonu.

1. Opcjonalnie: Aby przed opublikowaniem dodać kolejny wariant, otwórz menu z trzema kropkami wariantu i wybierz Klonuj wariant. Następnie wybierz i potwierdź inny szablon dla nowego wariantu.

Dostosuj ustawienia testu

W sekcji Ustawienia testu na dole okna konfiguracji możesz skonfigurować zwycięską metrykę, alokację ruchu dla wariantu oraz kryteria zakończenia testu.

1. Zwycięska metryka
   1. Wybierz, która metryka będzie mierzona, aby określić najlepiej działający szablon. Wybierz między wskaźnikiem wyświetleń wiadomości a wskaźnikiem kliknięć.
2. Rozkład wysyłki
   1. Włącz przełącznik Dystrybucja wysyłania, aby uruchomić automatyczną alokację: ruch zaczyna się od równego podziału i w trakcie testu przesuwa się w stronę lepiej działających wariantów. Wyłącz to, aby wprowadzić stałe wartości procentowe dla każdego wariantu. Wartości procentowe muszą łącznie wynosić 100%.
3. Kryteria zakończenia
   • Aby ręcznie zakończyć test, wyłącz Automatyczny wybór zwycięzcy.
   • Aby zakończyć test automatycznie, włącz Automatyczny wybór zwycięzcy i wybierz jedno lub oba z tych kryteriów:
     • Zakończ test na podstawie istotności statystycznej kończy test, gdy Klaviyo zidentyfikuje statystycznie istotnego zwycięzcę dla wybranej przez Ciebie metryki.
     • Wybierz Ustaw limit daty, a następnie wybierz przyszłą Datę zakończenia, aby zakończyć test tego dnia. Data jest oceniana w UTC.
   • Jeśli wybierzesz oba, test zakończy się, gdy spełnione zostanie którekolwiek z kryteriów.
4. Dodaj uwagi, aby prześledzić swoją hipotezę i uzasadnienie projektowe eksperymentu.

Jeśli używasz linków z metodą śledzenia UTM, włącz Śledź linki osobno w każdym wariancie, aby śledzić UTM-y indywidualnie.

Opublikuj test

Uwaga: wszystkie szablony użyte w teście muszą zostać zatwierdzone, zanim będziesz mógł go opublikować. Publikowanie ustawia wiadomość i jej warianty jako aktywne.

Kliknij Opublikuj test u góry strony. Sprawdź potwierdzenie, a następnie ponownie kliknij Opublikuj test, aby rozpocząć test.

Wyświetl wyniki testu na żywo

Aby wyświetlić wyniki testu na żywo, przejdź do kreatora sekwencji, kliknij wiadomość WhatsApp i kliknij Wyświetl test w panelu Szczegóły WhatsApp.

Ręczny wybór zwycięzcy

1. Na stronie wyników testu na żywo kliknij Wybierz zwycięzcę.
2. Wybierz wariant w Wybierz zwycięski wariant, a następnie kliknij Wybierz zwycięzcę, aby potwierdzić. Test dobiega końca, a wybrany wariant staje się wiadomością wysyłaną do przyszłych odbiorców na tym etapie sekwencji.

Wyświetl wyniki

Aby wyświetlić ukończony test, kliknij wiadomość WhatsApp w kreatorze sekwencji, a następnie kliknij Wyświetl wyniki w panelu Szczegóły WhatsApp. Aby wyświetlić wcześniejszy test, wybierz go z listy rozwijanej testów u góry strony wyników.

Więcej informacji o interpretowaniu prawdopodobieństwa wygranej i metryki wygranej znajdziesz w artykule Jak sprawdzić wyniki testu A/B e-maili dla sekwencji.

Dodatkowe źródła