Co testujesz
Tworzenie testu
- Twój aktywny koszyk jest automatycznie kontrolą — nie możesz tego zmienić.
- Wybierz jednego pretendenta spośród pozostałych koszyków.
- Ustaw alokację ruchu — podział między nimi, domyślnie 50/50. Każda strona to od 1% do 99%, a razem muszą dać 100%.
- Nadaj testowi nazwę (wymagana).
- Publish & start test.
Podczas trwania testu
- Kupujący są trwale przypisywani do jednego wariantu, więc powracający kupujący widzi ten sam koszyk przez cały czas trwania testu.
- Publikowanie i cofanie publikacji są zablokowane, a koszyki wariantów są tylko do odczytu w edytorze — zakończ test, aby wprowadzić zmiany.
Wskaźnik istotności
Pasek to wskaźnik gotowości — mówi, czy zebrano wystarczająco dużo ruchu, aby podjąć pewną decyzję. Nie jest to statystyczna wartość p, a Aftersell nie ogłasza zwycięzcy automatycznie. Pozwól testowi zebrać wystarczające dane, a potem porównaj warianty i wybierz.
Kończenie testu i wybór zwycięzcy
Wartość Revenue na ekranie kończenia testu jest szersza niż ta na stronie analityki testów. Tutaj to każda konwersja przypisana do koszyka. Na stronie Analityki testów metryka Added revenue jest zawężona do przychodu z upselli, dodatków i subskrypcji. Spodziewaj się, że te dwie liczby będą się różnić dla tego samego testu, i porównuj warianty w obrębie jednej powierzchni, a nie między nimi.
Co można, a czego nie można testować
- Można: dowolne dwie pełne konfiguracje koszyka. Zamieniaj układy, bloki, teksty, wygląd — zbuduj koszyk-pretendenta, jak chcesz, i przetestuj go przeciwko aktywnemu.
- Zastrzeżenie dotyczące metryk: metryka Added revenue w analityce testów obejmuje przychód z upselli, dodatków i subskrypcji — podzbiór wszystkiego, co zarabia koszyk, a nie pełny podział. Traktuj ją jako porównanie „jak za jak” między dwoma wariantami, a nie jako całkowity wkład każdego wariantu. Ekran kończenia testu używa szerszej wartości opisanej powyżej.