7 errores de prueba A/B que debes evitar

Publicado: 2020-04-14

Los Test A/B son la mejor herramienta para mejorar la tasa de conversión de cualquier sitio (ventas, suscripciones o cualquier otra acción que te interese). Después de crear dos o más versiones de cualquier página o publicación en su sitio web, puede saber con datos y no suposiciones, cuál funciona mejor.

prueba ab
En su forma más simple, las pruebas A/B proponen dividir aleatoriamente el tráfico del sitio en dos grupos para que el 50 % de los visitantes vean el diseño A mientras que el otro 50 % vea el diseño B. Al monitorear cómo reaccionan los usuarios de cada grupo, podemos calcular la tasa de conversión de cada grupo y, en caso de que haya una diferencia estadísticamente significativa entre los dos, declarar un diseño ganador.

Pero si bien la teoría está bien, ten cuidado con la práctica. Antes de comenzar a realizar pruebas A/B de sus páginas, asegúrese de no cometer errores que puedan conducir a resultados ilusorios. Eso podría terminar siendo una pérdida de dinero y tiempo que debes evitar a toda costa.

Veamos qué errores debes evitar al crear pruebas A/B…

#1 Comparando diferentes períodos de tiempo

Puede ser tentador analizar en detalle el comportamiento y la conversión de tus visitantes en cualquiera de tus páginas durante un período de tiempo. Luego, realice cambios en la web y vuelva a analizar los detalles del comportamiento en su sitio.

En este contexto, parece bastante fácil concluir que si ha obtenido mejores resultados durante el primer o segundo período de tiempo es porque la versión probada durante ese período es mejor que la otra.

Gif de mujer diciendo En realidad

Bueno, lamento decirte que no es una buena idea. Para empezar, la cantidad y calidad del tráfico que llega a tu web puede variar entre días y semanas. La misma página puede un día o semana convertir 15% y al día siguiente o semana 12%.

Este cambio puede deberse a factores totalmente ajenos a su sitio web (clima económico, estado de ánimo de sus visitantes, etc.). Por ejemplo, gracias a un tuit que se viraliza aumentas el tráfico en tu web. Pero el tipo de tráfico es de menor calidad y después de llegar a tu sitio web convierte menos. Otro ejemplo: lanzas un nuevo anuncio en Google con una oferta y el porcentaje de visitantes que llegan a tu sitio web a través del anuncio y luego convierten es muy alto.

Por tanto, la única forma de tener en cuenta todos estos factores es realizar un test A/B donde cada variante se muestre a un número proporcional de visitantes durante el mismo periodo. Al mostrar aleatoriamente las dos (o más) versiones a los visitantes en la misma semana, existe una probabilidad mucho mayor de que los resultados sean estadísticamente relevantes.

Así que olvídate de hacer un test de antes y después ya que no sabrás con certeza qué tan relevantes son los resultados para decidir qué versión es mejor.

#2 Terminar la prueba temprano

Ahora que ya sabes que tienes que hacer pruebas A/B, acabas de instalar Nelio A/B Testing y estás deseando lanzar tu primera página de prueba.

Gif de un hombre diciendo Dios mío, no puedo esperar

Empiezas a recopilar resultados y rápidamente la variante empieza a tener más conversiones que la página original. ¿Por qué perder el tiempo? ¿Por qué no hacer un cambio rápido y hacer que la nueva variante sea permanente? Esto aumentará las conversiones más rápido...

Volumen

Las pruebas A/B se basan en estadísticas y, como tales, es importante tener en cuenta que el tamaño de la muestra es importante: debe ser representativo. En otras palabras, debemos asegurarnos de haber obtenido suficientes resultados de nuestra prueba para que la prueba refleje adecuadamente la realidad.

Si utiliza una herramienta especializada para realizar pruebas A/B, como Nelio A/B Testing, la propia herramienta le informará si los resultados de sus pruebas son estadísticamente significativos.

Resultados de un test en Nelio A/B Testing
Resultados de un test en Nelio A/B Testing

Entonces podrías pensar que, dado que tienes un sitio web con mucho tráfico, obtendrás resultados rápidamente de lo que funciona mejor.

Duración

¡Cuidado! Hay otro factor a considerar al crear pruebas A/B. No solo es una cuestión de volumen, sino de asegurarse de que sus pruebas duren lo suficiente como para cubrir un ciclo de su negocio. Es decir, si, por ejemplo, el tipo de tráfico que recibes es diferente entre semana y fin de semana, asegúrate de que una prueba dure el mínimo de tiempo para que todos los tipos de tráfico estén representados.

Te recomiendo la calculadora CXL para que explores un poco más la duración y el tamaño que debe tener un test A/B para que sus resultados sean estadísticamente significativos.

Recuerda: sacar conclusiones antes de tiempo es lo mismo que tomar decisiones por intuición.

#3 Terminar la prueba demasiado tarde

Ahora vamos al otro extremo: acabas de lanzar una prueba y estás obteniendo resultados diferentes. Como sabes que no puedes llegar a conclusiones demasiado pronto, decides que tienes que esperar hasta obtener datos concluyentes, ¿verdad? Pasan los días y ninguna variante parece claramente mejor que otra, así que quizás haya que seguir esperando…

Bueno, ya te hemos dicho que no te apresures, pero si llevas tres meses sin resultados concluyentes, probablemente estés perdiendo el tiempo. Y lo está desperdiciando por la sencilla razón de que se está perdiendo otros tipos de pruebas que probablemente podrían brindarle información mucho más relevante sobre cómo optimizar la conversión.

#4 Confiar en las pruebas de los demás

Podemos y debemos aprender de los demás, pero me temo que los datos estadísticos de los demás no se aplican necesariamente a su sitio web. Es decir, probablemente hayas leído algún artículo comentando que el color del botón de llamada a la acción que mejor funciona es el rojo.

Gif de alguien haciendo clic en un botón rojo

La teoría es muy buena pero la realidad es que no decides que este resultado va a ser útil sin antes probarlo en tu sitio web. Los estudios de casos de otras personas no son útiles para tomar decisiones sobre su caso particular. Te serán útiles para tener nuevas ideas de qué cosas podrías probar.

#5 Cambiar una prueba en curso

Quizás uno de los peores errores que puede cometer después de iniciar una prueba AB en su sitio web es detenerla, realizar ciertos cambios y reanudarla. En el mejor de los casos, corrija un pequeño error tipográfico que detecte, pero no cree nuevas variantes ni cambie las que ya se están ejecutando. Estos cambios pueden invalidar totalmente los resultados obtenidos.

Si se encuentra en una situación en la que le gustaría realizar cambios en una prueba A/B en ejecución, deténgala por completo y ejecute una nueva prueba. Las dos pruebas por separado le darán resultados válidos. Si lo desea, intente interpretar los resultados de ambos juntos, pero tenga en cuenta que no podrá obtener resultados confiables si realiza cambios en cualquier prueba A/B en ejecución.

#6 Ejecutar Muchas Pruebas Simultáneamente

Simplifique su vida con las pruebas A/B. Si intenta analizar demasiados cambios a la vez, le resultará especialmente difícil interpretar los resultados de cada prueba. Puede crear dos o más variantes de una página que muestren versiones radicalmente diferentes de la misma. Está bien hacer esto y, de hecho, se ha estudiado que los cambios importantes pueden tener un mayor impacto en la conversión.

Sin embargo, no intente realizar muchas pruebas simultáneamente. Por cada nueva prueba que crees, se creará una nueva división de tráfico a las diferentes combinaciones posibles de variantes junto con las creadas anteriormente. Y precisamente cuantas más variantes acabes teniendo, más se dividirá tu tráfico y más te costará obtener resultados estadísticamente significativos.

# 7 No saber el propósito de su prueba

Y este debería ser el error más importante que debes evitar.

El objetivo de una prueba A/B es optimizar la conversión. Bueno. A partir de aquí, aplica el sentido común. Todas las páginas y publicaciones en su sitio web tienen un propósito: informar sobre los productos y servicios que ofrece, darse a conocer, explicar detalles sobre el funcionamiento del producto o servicio, asegurarse de que cumple con la ley de protección de datos, etc. Aunque todos son importantes, algunos son mucho más críticos en el embudo de conversión.

Por ejemplo, si tienes un e-commerce, las páginas más relevantes serán las que muestran todos los productos, las que muestran el detalle de un producto y la página donde se realiza el pago de la compra. Así que, para empezar, no te enredes analizando otras páginas y céntrate en optimizar estas.

Además, piensa bien en los objetivos más importantes en cada uno de ellos:

  • Deje que el visitante compre ese producto.
  • Permita que el visitante agregue ese producto a la lista de deseos o al carrito de compras.
  • Pídales que busquen otros productos relacionados.
  • Recomendar la compra de dichos productos a terceros.
  • Para contactarte para más información.

Identifica bien tus objetivos y piensa qué mejoras pueden ayudarte a alcanzarlos. A partir de ahí, las pruebas que crea tendrán sentido y ayudarán a mejorar su sitio web.

Imagen destacada de Sarah Kilian en Unsplash.