7 błędów testowania A/B, których należy unikać

Testy A/B to najlepsze narzędzie do poprawy współczynnika konwersji dowolnej witryny (sprzedaż, subskrypcje lub wszelkie inne działania, które mogą Cię zainteresować). Po utworzeniu dwóch lub więcej wersji dowolnej strony lub posta w witrynie możesz za pomocą danych, a nie założeń, wiedzieć, która z nich działa najlepiej.

Ale dopóki teoria jest w porządku, uważaj na praktykę. Zanim zaczniesz robić testy A/B swoich stron, upewnij się, że nie popełniasz błędów, które mogą prowadzić do złudzeń. Może to skończyć się stratą pieniędzy i czasu, których należy unikać za wszelką cenę.

Zobaczmy jakich błędów należy unikać podczas tworzenia testów A/B…

#1 Porównywanie różnych okresów czasu

Szczegółowa analiza zachowania i konwersji użytkowników na dowolnej stronie może być kusząca przez określony czas. Następnie wprowadź zmiany w sieci i ponownie przeanalizuj szczegóły zachowania w Twojej witrynie.

W tym kontekście dość łatwo można stwierdzić, że jeśli uzyskałeś lepsze wyniki w pierwszym lub drugim okresie, to dlatego, że wersja testowana w tym okresie jest lepsza od drugiej.

Cóż, przepraszam, że to nie jest dobry pomysł. Po pierwsze, ilość i jakość ruchu docierającego do Twojej witryny może różnić się w dniach lub tygodniach. Ta sama strona może w jednym dniu lub tygodniu konwertować 15%, a następnego dnia lub tygodnia 12%.

Ta zmiana może być spowodowana czynnikami całkowicie niezwiązanymi z Twoją witryną (klimat gospodarczy, nastrój odwiedzających itp.). Na przykład dzięki tweetowi, który staje się wirusowy, zwiększasz ruch w swojej witrynie. Jednak rodzaj ruchu jest gorszej jakości i po dotarciu do Twojej witryny konwertuje mniej. Inny przykład: uruchamiasz nową reklamę w Google z ofertą, a odsetek odwiedzających, którzy trafiają do Twojej witryny za pośrednictwem reklamy, a następnie przeprowadzają konwersję, jest bardzo wysoki.

Dlatego jedynym sposobem na uwzględnienie wszystkich tych czynników jest wykonanie testu A/B, w którym każdy wariant jest pokazywany proporcjonalnej liczbie odwiedzających w tym samym okresie. Losowo pokazując dwie (lub więcej) wersje odwiedzającym w tym samym tygodniu, istnieje znacznie większe prawdopodobieństwo, że wyniki są istotne statystycznie.

Więc zapomnij o wykonaniu testu przed i po, ponieważ nie będziesz wiedział na pewno, jak istotne są wyniki, aby zdecydować, która wersja jest lepsza.

#2 Wcześniejsze zakończenie testu

Teraz, gdy wiesz, że musisz wykonać testy A/B, właśnie zainstalowałeś testowanie Nelio A/B i nie możesz się doczekać rozpoczęcia pierwszego testu strony.

Zaczynasz zbierać wyniki i szybko wariant zaczyna mieć więcej konwersji niż oryginalna strona. Po co marnować czas? Dlaczego nie dokonać szybkiej zmiany i nie uczynić nowego wariantu trwałym? Szybciej zwiększy to konwersje…

Tom

Testy A/B opierają się na statystykach i dlatego należy pamiętać, że wielkość próbki ma znaczenie — musi być reprezentatywna. Innymi słowy, musimy upewnić się, że uzyskaliśmy wystarczająco dużo wyników z naszego testu, aby test odpowiednio odzwierciedlał rzeczywistość.

Jeśli korzystasz ze specjalistycznego narzędzia do wykonywania testów A/B, takiego jak Nelio A/B Testing, samo narzędzie poinformuje Cię, czy wyniki Twoich testów są istotne statystycznie.

Wtedy możesz pomyśleć, że skoro masz witrynę o dużym ruchu, szybko uzyskasz wyniki z tego, co działa najlepiej.

Czas trwania

Uważaj! Podczas tworzenia testów A/B należy wziąć pod uwagę jeszcze jeden czynnik. Nie tylko jest to kwestia ilości, ale upewnij się, że testy trwają wystarczająco długo, aby objąć cykl Twojej działalności. Oznacza to, że jeśli na przykład rodzaj ruchu, który otrzymujesz, jest inny w dni powszednie i w weekendy, upewnij się, że test trwa przez minimalny okres czasu dla wszystkich rodzajów ruchu.

Polecam kalkulator CXL, aby dokładniej zbadać czas trwania i rozmiar testu A/B, aby jego wyniki były statystycznie istotne.

Pamiętaj: wyciąganie wniosków z wyprzedzeniem jest tym samym, co podejmowanie decyzji intuicyjnie.

#3 Zbyt późno zakończenie testu

Teraz przechodzimy na drugą skrajność: właśnie uruchomiłeś test i otrzymujesz inne wyniki. Ponieważ wiesz, że nie możesz dojść do wniosków zbyt wcześnie, decydujesz, że musisz poczekać, aż uzyskasz ostateczne dane, prawda? Dni mijają i żaden wariant nie wydaje się wyraźnie lepszy od drugiego, więc może trzeba czekać…

Cóż, powiedzieliśmy już, żeby się nie spieszyć, ale jeśli przez trzy miesiące nie uzyskałeś rozstrzygających wyników, prawdopodobnie marnujesz swój czas. I marnujesz to z prostego powodu, że omijasz inne rodzaje testów, które prawdopodobnie dałyby Ci znacznie bardziej trafne informacje o tym, jak zoptymalizować konwersję.

# 4 Poleganie na testach innych

Możemy i powinniśmy uczyć się od innych, ale obawiam się, że dane statystyczne innych niekoniecznie dotyczą Twojej strony. Oznacza to, że prawdopodobnie czytałeś artykuł, w którym skomentowano, że kolor przycisku wezwania do działania, który działa najlepiej, to czerwony.

Teoria jest bardzo dobra, ale rzeczywistość jest taka, że ​​nie decydujesz, że ten wynik będzie przydatny, bez uprzedniego przetestowania go na swojej stronie internetowej. Studia przypadków innych osób nie są przydatne w podejmowaniu decyzji dotyczących konkretnego przypadku. Przydadzą ci się, aby mieć nowe pomysły na to, co możesz przetestować.

#5 Zmiana testu uruchomionego

Być może jednym z najgorszych błędów, jakie możesz popełnić po uruchomieniu testu AB na swojej stronie, jest zatrzymanie go, wprowadzenie pewnych zmian i wznowienie go. W najlepszym wypadku napraw drobną literówkę, którą wykryjesz, ale nie twórz nowych wariantów ani nie zmieniaj już działających. Zmiany te mogą całkowicie unieważnić uzyskane wyniki.

Jeśli znajdziesz się w sytuacji, w której chciałbyś wprowadzić zmiany w trwającym teście A/B, zatrzymaj go całkowicie i uruchom nowy test. Dwa testy osobno dadzą prawidłowe wyniki. Jeśli chcesz, spróbuj zinterpretować wyniki obu razem, ale pamiętaj, że nie będziesz w stanie uzyskać wiarygodnych wyników, jeśli wprowadzisz zmiany w jakimkolwiek uruchomionym teście A/B.

#6 Jednoczesne przeprowadzanie wielu testów

Utrzymuj swoje życie proste dzięki testom A/B. Jeśli spróbujesz przeanalizować zbyt wiele zmian naraz, będzie ci szczególnie trudno zinterpretować wyniki każdego testu. Możesz utworzyć dwa lub więcej wariantów strony, które pokazują radykalnie różne jej wersje. Jest to w porządku i faktycznie zbadano, że duże zmiany mogą mieć większy wpływ na konwersję.

Nie próbuj jednak wykonywać wielu testów jednocześnie. Dla każdego nowego testu, który utworzysz, zostanie utworzony nowy podział ruchu na różne możliwe kombinacje wariantów wraz z wcześniej utworzonymi. A dokładniej, im więcej wariantów otrzymasz, tym bardziej zostanie podzielony ruch i tym więcej będzie Cię kosztować uzyskanie statystycznie istotnych wyników.

# 7 Nieznajomość celu twojego testu

I to powinien być najważniejszy błąd, którego powinieneś unikać.

Celem testu A/B jest optymalizacja konwersji. Dobra. Od tego momentu stosuj zdrowy rozsądek. Wszystkie strony i posty mają cel w Twojej witrynie: informowanie o produktach i usługach, które oferujesz, ujawnianie się, wyjaśnianie szczegółów dotyczących działania produktu lub usługi, zapewnienie przestrzegania przepisów o ochronie danych itp. Chociaż wszystkie z nich są ważne, niektóre z nich są znacznie bardziej krytyczne w ścieżce konwersji.

Na przykład, jeśli masz e-commerce, najbardziej odpowiednie strony to te, które pokazują wszystkie produkty, te, które pokazują szczegóły produktu, oraz strona, na której dokonuje się płatności. Tak więc na początek nie daj się zaplątać analizując inne strony i skup się na optymalizacji tych.

Zastanów się również nad najważniejszymi celami w każdym z nich:

• Pozwól odwiedzającemu kupić ten produkt.
• Pozwól odwiedzającemu dodać ten produkt do listy życzeń lub koszyka.
• Niech spojrzą na inne powiązane produkty.
• Polecić zakup tych produktów osobom trzecim.
• Aby się z Tobą skontaktować, aby uzyskać więcej informacji.

Dobrze zidentyfikuj swoje cele i zastanów się, jakie ulepszenia mogą pomóc Ci je osiągnąć. Stamtąd testy, które Twoim zdaniem będą miały sens i pomogą ulepszyć Twoją witrynę.

Polecane zdjęcie Sarah Kilian w Unsplash.