Zrozumienie istotności statystycznej dla formularza rejestracyjnego

Czego się dowiesz

Dowiedz się, kiedy wyniki testu A/B są uznawane za statystycznie istotne dla Klaviyo formularza rejestracyjnego. W tym przewodniku wyjaśniono znaczenie statystyczne dla formularza rejestracyjnego i kiedy się o nim decyduje. 

Klaviyo decyduje, kiedy test A/B osiągnął istotność statystyczną, gdy jeden wariant okazał się matematycznie lepszy od drugiego. Możesz skonfigurować test A/B tak, aby automatycznie wybierał zwycięski wariant formularza i kończył się, gdy wyniki testu zostaną uznane za statystycznie istotne.

Testy A/B pozwalają zmierzyć, jak działają różne elementy formularzy, aby upewnić się, że dobrze rezonują z odwiedzającymi Twoją witrynę i generują duże zaangażowanie. Ważne jest, aby zrozumieć, czy test można uznać za statystycznie istotny, abyś mógł skutecznie analizować wyniki i określić, jakie ulepszenia należy wprowadzić. Jeśli wyniki testów nie są statystycznie istotne, trudniej jest potwierdzić, że określony wariant zapewni lepszą wydajność na dużą skalę.

Jak Klaviyo określa istotność statystyczną dla formularzy

Aby osiągnąć istotność statystyczną, test A/B formularza rejestracyjnego musi spełniać następujące warunki:

1. Co najmniej 90% prawdopodobieństwo wygranej dla wiodącego wariantu
2. Co najmniej 1000 wyświetleń formularza na wariant

Poniżej znajdziesz bardziej szczegółowe wyjaśnienie, w jaki sposób Klaviyo bierze pod uwagę każdy z tych czynników.

• Prawdopodobieństwo wygranej wiodącego wariantu
  • Jest to prawdopodobieństwo, że wskaźnik wypełnień formularzy dla wiodącego wariantu jest rzeczywiście wyższy niż wskaźnik wypełnień formularzy dla wszystkich pozostałych wariantów. Wysokie prawdopodobieństwo wygranej oznacza, że istnieją mocne dowody na to, że wiodący wariant wygra ze względu na lepszą formę, a nie z powodu losowego przypadku. 
• Widoki formularzy
  • Formularz musi zebrać wystarczającą liczbę wyświetleń, aby upewnić się, że wyniki nie są wypaczone przez jakiekolwiek anomalie wczesnych testów. 

Zakończ test A/B po osiągnięciu istotności statystycznej

W ustawieniu Wybór zwycięzcy możesz skonfigurować test tak, aby kończył się automatycznie, gdy istnieje 1 wariant, który przewyższa inne na statystycznie istotnym poziomie lub gdy osiągnie określoną datę. Możesz też zaznaczyć oba pola, aby zakończyć test po spełnieniu jednego z dwóch warunków (co oznacza, że test osiągnie istotność statystyczną lub dotrze do daty zakończenia). 

Alternatywnie, jeśli zdecydujesz się zakończyć test ręcznie, odznaczając oba pola w sekcji Wybór zwycięzcy, będziesz musiał monitorować wyniki niezależnie i ręcznie wybrać zarówno zwycięzcę, jak i datę zakończenia. 

Podczas przeglądania wyników trwającego testu możesz monitorować prawdopodobieństwo wygranej, a także aktualną wartość dla każdego wariantu w menu Przegląd na karcie wyników testu A/B. 

Aby uzyskać więcej informacji, zapoznaj się z naszym przewodnikiem na temat przeglądania wyników testów A/B. 

Dodatkowe źródła

• Jak testować A/B formularz rejestracyjny
• Najlepsze praktyki dla Testy A/B
• Zrozumienie formularza rejestracyjnego dane analityczne