7 A/B-Testfehler, die Sie vermeiden sollten

A/B-Tests sind das beste Tool, um die Konversionsrate jeder Website zu verbessern (Verkäufe, Abonnements oder andere Aktionen, an denen Sie interessiert sein könnten). Nachdem Sie zwei oder mehr Versionen einer Seite oder eines Beitrags auf Ihrer Website erstellt haben, können Sie anhand von Daten und nicht von Annahmen wissen, welche am besten funktioniert.

Aber während die Theorie in Ordnung ist, achten Sie auf die Praxis. Bevor Sie mit A/B-Tests Ihrer Seiten beginnen, stellen Sie sicher, dass Sie keine Fehler machen, die zu illusorischen Ergebnissen führen könnten. Das könnte am Ende eine Geld- und Zeitverschwendung sein, die Sie um jeden Preis vermeiden sollten.

Mal sehen, welche Fehler Sie beim Erstellen von A/B-Tests vermeiden sollten…

#1 Vergleich verschiedener Zeiträume

Es kann verlockend sein, das Verhalten und die Konvertierung Ihrer Besucher auf einer Ihrer Seiten für einen bestimmten Zeitraum im Detail zu analysieren. Nehmen Sie dann Änderungen am Web vor und analysieren Sie die Details des Verhaltens auf Ihrer Website erneut.

In diesem Zusammenhang scheint es ziemlich einfach zu schlussfolgern, dass, wenn Sie während des ersten oder zweiten Zeitraums bessere Ergebnisse erzielt haben, dies daran liegt, dass die während dieses Zeitraums getestete Version besser ist als die andere.

Nun, es tut mir leid, Ihnen sagen zu müssen, dass das keine gute Idee ist. Zunächst einmal kann die Quantität und Qualität des Traffics, der Ihre Website erreicht, zwischen Tagen und Wochen variieren. Dieselbe Seite kann an einem Tag oder in der Woche 15 % und am nächsten Tag oder in der nächsten Woche 12 % konvertieren.

Diese Änderung kann auf Faktoren zurückzuführen sein, die nichts mit Ihrer Website zu tun haben (Wirtschaftsklima, Stimmung Ihrer Besucher usw.). Dank eines viralen Tweets erhöhen Sie beispielsweise den Traffic auf Ihrer Website. Aber die Art des Traffics ist von geringerer Qualität und nach dem Erreichen Ihrer Website konvertiert er weniger. Ein anderes Beispiel: Sie schalten eine neue Anzeige bei Google mit einem Angebot und der Prozentsatz der Besucher, die über die Anzeige auf Ihre Website kommen und dann konvertieren, ist sehr hoch.

Die einzige Möglichkeit, all diese Faktoren zu berücksichtigen, besteht daher darin, einen A/B-Test durchzuführen, bei dem jede Variante einer proportionalen Anzahl von Besuchern im gleichen Zeitraum gezeigt wird. Indem den Besuchern in derselben Woche zwei (oder mehr) Versionen nach dem Zufallsprinzip angezeigt werden, besteht eine viel größere Wahrscheinlichkeit, dass die Ergebnisse statistisch relevant sind.

Vergessen Sie also einen Vorher-Nachher-Test, da Sie nicht sicher wissen, wie relevant die Ergebnisse sind, um zu entscheiden, welche Version besser ist.

#2 Den Test vorzeitig beenden

Jetzt, da Sie wissen, dass Sie A/B-Tests durchführen müssen, haben Sie gerade Nelio A/B Testing installiert und freuen sich darauf, Ihren ersten Seitentest zu starten.

Sie fangen an, Ergebnisse zu sammeln und schnell beginnt die Variante mehr Conversions zu haben als die Originalseite. Warum Zeit verschwenden? Warum nicht schnell wechseln und die neue Variante dauerhaft machen? Dadurch werden die Conversions schneller gesteigert…

Volumen

A/B-Tests basieren auf Statistiken und daher ist es wichtig, daran zu denken, dass Ihre Stichprobengröße wichtig ist – sie muss repräsentativ sein. Mit anderen Worten, wir müssen sicherstellen, dass wir genügend Ergebnisse aus unserem Test erhalten haben, damit der Test die Realität angemessen widerspiegelt.

Wenn Sie ein spezialisiertes Tool zur Durchführung von A/B-Tests verwenden, wie z. B. Nelio A/B Testing, informiert Sie das Tool selbst, wenn Ihre Testergebnisse statistisch signifikant sind.

Dann denken Sie vielleicht, dass Sie, da Sie eine Website mit viel Verkehr haben, schnell Ergebnisse von dem erhalten, was am besten funktioniert.

Dauer

Achtung! Beim Erstellen von A/B-Tests ist noch ein weiterer Faktor zu berücksichtigen. Es ist nicht nur eine Frage des Volumens, sondern stellen Sie sicher, dass Ihre Tests lange genug dauern, um einen Zyklus Ihres Geschäfts abzudecken. Das heißt, wenn beispielsweise die Art des Verkehrs, den Sie erhalten, an Wochentagen und Wochenenden unterschiedlich ist, stellen Sie sicher, dass ein Test den Mindestzeitraum für alle Verkehrsarten dauert, die vertreten sind.

Ich empfehle Ihnen den CXL-Rechner, um die Dauer und Größe eines A/B-Tests ein wenig genauer zu untersuchen, damit seine Ergebnisse statistisch signifikant sind.

Denken Sie daran: Schlussfolgerungen im Voraus zu ziehen, ist dasselbe wie Entscheidungen durch Intuition zu treffen.

#3 Den Test zu spät beenden

Jetzt gehen wir zum anderen Extrem über: Sie haben gerade einen Test gestartet und erhalten andere Ergebnisse. Da Sie wissen, dass Sie nicht zu früh zu Schlussfolgerungen kommen können, beschließen Sie, dass Sie warten müssen, bis Sie schlüssige Daten erhalten, richtig? Die Tage vergehen und keine Variante scheint eindeutig besser als die andere zu sein, also müssen Sie vielleicht weiter warten…

Nun, wir haben bereits gesagt, dass Sie es nicht überstürzen sollen, aber wenn Sie drei Monate ohne schlüssige Ergebnisse verbracht haben, verschwenden Sie wahrscheinlich Ihre Zeit. Und Sie verschwenden sie aus dem einfachen Grund, dass Sie andere Arten von Tests verpassen, die Ihnen wahrscheinlich viel relevantere Informationen zur Optimierung der Konversion liefern könnten.

#4 Sich auf die Tests anderer verlassen

Wir können und sollten von anderen lernen, aber ich fürchte, dass die statistischen Daten anderer nicht unbedingt auf Ihre Website zutreffen. Das heißt, Sie haben wahrscheinlich einen Artikel gelesen, in dem kommentiert wurde, dass die Farbe des Call-to-Action-Buttons, die am besten funktioniert, rot ist.

Die Theorie ist sehr gut, aber die Realität ist, dass Sie nicht entscheiden, ob dieses Ergebnis nützlich sein wird, ohne es zuerst auf Ihrer Website zu testen. Die Fallstudien anderer Personen sind nicht hilfreich, um Entscheidungen über Ihren speziellen Fall zu treffen. Sie werden Ihnen dabei helfen, neue Ideen zu bekommen, was Sie testen könnten.

#5 Ändern eines laufenden Tests

Vielleicht ist einer der schlimmsten Fehler, den Sie machen können, nachdem Sie einen AB-Test auf Ihrer Website gestartet haben, ihn zu stoppen, bestimmte Änderungen vorzunehmen und ihn wieder aufzunehmen. Beheben Sie am besten einen kleinen Tippfehler, den Sie entdecken, erstellen Sie aber keine neuen Varianten oder ändern Sie die bereits laufenden. Diese Änderungen können die erhaltenen Ergebnisse vollständig ungültig machen.

Wenn Sie sich in einer Situation befinden, in der Sie Änderungen an einem laufenden A/B-Test vornehmen möchten, stoppen Sie ihn vollständig und führen Sie einen neuen Test durch. Die beiden Tests getrennt liefern Ihnen gültige Ergebnisse. Wenn Sie möchten, versuchen Sie, die Ergebnisse beider zusammen zu interpretieren, aber seien Sie sich bewusst, dass Sie keine zuverlässigen Ergebnisse erhalten, wenn Sie Änderungen an einem laufenden A/B-Test vornehmen.

#6 Viele Tests gleichzeitig ausführen

Halten Sie Ihr Leben mit A/B-Tests einfach. Wenn Sie versuchen, zu viele Änderungen auf einmal zu analysieren, wird es Ihnen besonders schwer fallen, die Ergebnisse der einzelnen Tests zu interpretieren. Sie können zwei oder mehr Varianten einer Seite erstellen, die radikal unterschiedliche Versionen davon zeigen. Es ist in Ordnung, dies zu tun, und tatsächlich wurde untersucht, dass größere Änderungen einen größeren Einfluss auf die Conversion haben können.

Versuchen Sie jedoch nicht, viele Tests gleichzeitig durchzuführen. Für jeden neuen Test, den Sie erstellen, wird eine neue Aufteilung des Verkehrs auf die verschiedenen möglichen Kombinationen von Varianten zusammen mit den zuvor erstellten erstellt. Und je mehr Varianten Sie am Ende haben, desto mehr wird Ihr Traffic aufgeteilt und desto mehr kostet es Sie, statistisch signifikante Ergebnisse zu erzielen.

#7 Den Zweck Ihres Tests nicht kennen

Und das sollte der wichtigste Fehler sein, den Sie vermeiden sollten.

Ziel eines A/B-Tests ist es, die Conversion zu optimieren. In Ordnung. Wenden Sie ab hier den gesunden Menschenverstand an. Alle Seiten und Beiträge auf Ihrer Website haben einen Zweck: über die von Ihnen angebotenen Produkte und Dienstleistungen zu informieren, sich bekannt zu machen, Einzelheiten über die Funktionsweise des Produkts oder der Dienstleistung zu erklären, sicherzustellen, dass Sie die Datenschutzgesetze einhalten usw. Obwohl alle von ihnen wichtig sind, sind einige von ihnen im Conversion-Funnel viel kritischer.

Wenn Sie beispielsweise einen E-Commerce haben, sind die relevantesten Seiten diejenigen, die alle Produkte zeigen, diejenigen, die die Details eines Produkts zeigen, und die Seite, auf der der Zahlungskauf getätigt wird. Verwirren Sie sich also zunächst nicht mit der Analyse anderer Seiten und konzentrieren Sie sich darauf, diese zu optimieren.

Denken Sie auch gut über die wichtigsten Ziele in jedem von ihnen nach:

• Lassen Sie den Besucher dieses Produkt kaufen.
• Lassen Sie den Besucher dieses Produkt zur Wunschliste oder zum Warenkorb hinzufügen.
• Lassen Sie sie sich andere verwandte Produkte ansehen.
• Um Dritten den Kauf dieser Produkte zu empfehlen.
• Um Sie für weitere Informationen zu kontaktieren.

Identifizieren Sie Ihre Ziele gut und überlegen Sie, welche Verbesserungen Ihnen helfen können, sie zu erreichen. Von dort aus werden die Tests Ihrer Meinung nach sinnvoll sein und zur Verbesserung Ihrer Website beitragen.

Beitragsbild von Sarah Kilian auf Unsplash.