7 Errori di test A/B da evitare

Pubblicato: 2020-04-14

Gli A/B Test sono lo strumento migliore per migliorare il tasso di conversione di qualsiasi sito (vendite, abbonamenti o qualsiasi altra azione che potrebbe interessarti). Dopo aver creato due o più versioni di qualsiasi pagina o post sul tuo sito web, puoi sapere con i dati e non con le ipotesi, quale funziona meglio.

test addominali
Nella sua forma più semplice, il test A/B propone di dividere casualmente il traffico verso il sito in due gruppi in modo che il 50% dei visitatori veda il design A mentre l'altro 50% vede il design B. Monitorando come reagiscono gli utenti di ciascun gruppo, possiamo calcolare il tasso di conversione di ciascun gruppo e, nel caso ci sia una differenza statisticamente significativa tra i due, dichiarare un design vincente.

Ma mentre la teoria va bene, fai attenzione alla pratica. Prima di iniziare a fare test A/B delle tue pagine assicurati di non commettere errori che potrebbero portare a risultati illusori. Potrebbe finire per essere uno spreco di denaro e tempo che dovresti evitare a tutti i costi.

Vediamo quali errori dovresti evitare durante la creazione di test A/B...

# 1 Confronto di diversi periodi di tempo

Può essere allettante analizzare in dettaglio il comportamento e la conversione dei tuoi visitatori su una qualsiasi delle tue pagine per un periodo di tempo. Quindi, apporta modifiche al Web e rianalizza i dettagli del comportamento sul tuo sito.

In questo contesto, sembra abbastanza facile concludere che se hai ottenuto risultati migliori durante il primo o il secondo periodo di tempo è perché la versione testata in quel periodo è migliore dell'altra.

Gif di donna che dice In realtà

Bene, mi dispiace dirti che non è una buona idea. Per cominciare, la quantità e la qualità del traffico che raggiunge il tuo sito web può variare tra giorni e settimane. La stessa pagina può convertire un giorno o una settimana del 15% e il giorno o la settimana successivi del 12%.

Questo cambiamento può essere dovuto a fattori totalmente estranei al tuo sito web (clima economico, umore dei tuoi visitatori, ecc.). Ad esempio, grazie a un tweet che diventa virale aumenti il ​​traffico sul tuo sito web. Ma il tipo di traffico è di qualità inferiore e dopo aver raggiunto il tuo sito web, converte di meno. Un altro esempio: lanci un nuovo annuncio su Google con un'offerta e la percentuale di visitatori che arrivano al tuo sito web tramite l'annuncio e poi convertono è molto alta.

Pertanto, l'unico modo per tenere conto di tutti questi fattori è eseguire un test A/B in cui ogni variante viene mostrata a un numero proporzionale di visitatori durante lo stesso periodo. Mostrando casualmente le due (o più) versioni ai visitatori nella stessa settimana, c'è una probabilità molto maggiore che i risultati siano statisticamente rilevanti.

Quindi dimentica di fare un test prima e dopo perché non saprai con certezza quanto siano rilevanti i risultati per decidere quale versione sia migliore.

# 2 Terminare il test in anticipo

Ora che sai che devi fare i test A/B, hai appena installato Nelio A/B Testing e sei entusiasta di lanciare il tuo test della prima pagina.

Gif di un uomo che dice OMG, non vedo l'ora

Inizi a raccogliere risultati e rapidamente la variante inizia ad avere più conversioni rispetto alla pagina originale. Perché perdere tempo? Perché non apportare una rapida modifica e rendere permanente la nuova variante? Ciò aumenterà le conversioni più velocemente...

Volume

I test A/B si basano su statistiche e, in quanto tali, è importante tenere presente che la dimensione del campione è importante: deve essere rappresentativa. In altre parole, dobbiamo assicurarci di aver ottenuto risultati sufficienti dal nostro test affinché il test rifletta adeguatamente la realtà.

Se utilizzi uno strumento specializzato per eseguire test A/B, come Nelio A/B Testing, lo strumento stesso ti informerà se i risultati dei test sono statisticamente significativi.

Risultati di un test nel Nelio A/B Testing
Risultati di un test nel Nelio A/B Testing

Quindi potresti pensare che, dal momento che hai un sito Web con molto traffico, otterrai rapidamente risultati da ciò che funziona meglio.

Durata

Attento! C'è un altro fattore da considerare quando si creano test A/B. Non è solo una questione di volume, ma assicurati che i tuoi test durino abbastanza a lungo da coprire un ciclo della tua attività. Cioè, se, ad esempio, il tipo di traffico che ricevi è diverso nei giorni feriali e nei fine settimana, assicurati che un test duri il periodo minimo di tempo per tutti i tipi di traffico sono rappresentati.

Raccomando il calcolatore CXL per esplorare un po' di più la durata e le dimensioni che un test A/B dovrebbe avere affinché i suoi risultati siano statisticamente significativi.

Ricorda: trarre conclusioni in anticipo equivale a prendere decisioni in base all'intuizione.

# 3 Terminare il test troppo tardi

Ora andiamo all'altro estremo: hai appena avviato un test e stai ottenendo risultati diversi. Dato che sai che non puoi arrivare a conclusioni troppo presto, decidi di dover aspettare fino a quando non avrai dati conclusivi, giusto? Passano i giorni e nessuna variante sembra chiaramente migliore dell'altra, quindi forse devi continuare ad aspettare...

Bene, abbiamo già detto di non avere fretta, ma se sei stato tre mesi senza risultati conclusivi, probabilmente stai perdendo tempo. E lo stai sprecando per il semplice motivo che stai perdendo altri tipi di test che potrebbero probabilmente darti informazioni molto più rilevanti su come ottimizzare la conversione.

# 4 Fare affidamento sui test degli altri

Possiamo e dobbiamo imparare dagli altri, ma temo che i dati statistici degli altri non si applichino necessariamente al tuo sito web. Cioè, probabilmente hai letto qualche articolo in cui si commenta che il colore del pulsante di invito all'azione che funziona meglio è il rosso.

Gif di qualcuno che fa clic su un pulsante rosso

La teoria è molto buona, ma la realtà è che non decidi che questo risultato sarà utile senza prima averlo testato sul tuo sito web. I casi di studio di altre persone non sono utili per prendere decisioni sul tuo caso particolare. Ti saranno utili per avere nuove idee su quali cose potresti testare.

# 5 Modifica di un test di corsa

Forse uno dei peggiori errori che puoi fare dopo aver avviato un test AB sul tuo sito Web è interromperlo, apportare determinate modifiche e riprenderlo. Nella migliore delle ipotesi, correggi un piccolo errore di battitura che rilevi ma non creare nuove varianti o modificare quelle già in esecuzione. Tali modifiche possono invalidare totalmente i risultati ottenuti.

Se ti trovi in ​​una situazione in cui desideri apportare modifiche a un test A/B in esecuzione, interrompilo completamente ed esegui un nuovo test. I due test separatamente ti daranno risultati validi. Se lo desideri, prova a interpretare i risultati di entrambi insieme, ma tieni presente che non sarai in grado di ottenere risultati affidabili se apporti modifiche a qualsiasi test A/B in esecuzione.

# 6 Esecuzione di molti test contemporaneamente

Semplifica la tua vita con i test A/B. Se si tenta di analizzare troppe modifiche contemporaneamente, sarà particolarmente difficile interpretare i risultati di ogni test. Puoi creare due o più varianti di una pagina che ne mostrano versioni radicalmente diverse. Va bene farlo e, in effetti, è stato studiato che i grandi cambiamenti possono avere un impatto maggiore sulla conversione.

Tuttavia, non tentare di eseguire molti test contemporaneamente. Per ogni nuovo test che crei, verrà creata una nuova suddivisione del traffico per le diverse possibili combinazioni di varianti insieme a quelle create in precedenza. E proprio più varianti finirai per avere, più il tuo traffico sarà diviso e più ti costerà ottenere risultati statisticamente significativi.

# 7 Non conoscendo lo scopo del tuo test

E questo dovrebbe essere l'errore più importante da evitare.

L'obiettivo di un test A/B è ottimizzare la conversione. Bene. Da qui, applica il buon senso. Tutte le pagine e i post hanno uno scopo sul tuo sito web: informare sui prodotti e servizi che offri, farti conoscere, spiegare i dettagli su come funziona il prodotto o servizio, assicurarti di rispettare la legge sulla protezione dei dati, ecc. Sebbene tutti siano importanti, alcuni di essi sono molto più critici nella canalizzazione di conversione.

Ad esempio, se hai un e-commerce, le pagine più rilevanti saranno quelle che mostrano tutti i prodotti, quelle che mostrano il dettaglio di un prodotto e la pagina in cui viene effettuato l'acquisto con pagamento. Quindi, per cominciare, non ingarbugliarti analizzando altre pagine e concentrati sull'ottimizzazione di queste.

Inoltre, pensa bene agli obiettivi più importanti in ciascuno di essi:

  • Consenti al visitatore di acquistare quel prodotto.
  • Consenti al visitatore di aggiungere quel prodotto alla lista dei desideri o al carrello.
  • Invitali a guardare altri prodotti correlati.
  • Consigliare l'acquisto di tali prodotti a terzi.
  • Per contattarti per maggiori informazioni.

Identifica bene i tuoi obiettivi e pensa a quali miglioramenti possono aiutarti a raggiungerli. Da lì, i test che ritieni avranno senso e aiuteranno a migliorare il tuo sito web.

Immagine in primo piano di Sarah Kilian su Unsplash.