Ah, prueba dividida. Lo amamos. Lo juramos. Nosotros lo hacemos. Les decimos a otras personas que lo hagan. Aprendemos de ello. Leemos estudios de casos al respecto.
Y a veces, lo estropeamos por completo.
Las pruebas A/B no son bastante tan fácil como comprar algún software, hacer algunos cambios y ejecutar una prueba. Si fuera tan fácil, más personas lo estarían haciendo y optimizando al máximo sus sitios.
Claramente, sin embargo, la mayoría de las personas no son optimizando al máximo sus sitios. ¿Dónde está la desconexión? Hay algunos errores que son muy fáciles de cometer. Incluso los profesionales tienden a cometer algunos de estos errores de vez en cuando.
Si no está viendo el nivel de resultados que desea, o está frustrado con los resultados de su prueba dividida, haría bien en leer este artículo. Hacer algunos cambios pequeños pero significativos puede revolucionar su enfoque de las pruebas divididas.
Estas son las siete leyes principales de las pruebas divididas que podría estar violando.
Todo el mundo ha oído hablar de las pruebas A/B, pero ¿qué pasa con las pruebas A/A?
Una prueba A/A es aquella en la que prueba su sitio o página contra sí mismo. Sin variables. Sin cambios. Simplemente pruebe la página y vuelva a probarla.
¿Por qué harías esto? Simple. Desea validar la configuración de prueba. Por ejemplo, si va a ejecutar una prueba A/B, primero debe ejecutar una prueba A/A para asegurarse de que el tiempo y el conjunto de datos de la próxima prueba dividida sean precisos.
Además, existe el beneficio adicional de probar el propio software de prueba. si te encuentras fallos importantes o desconexiones del conjunto de datos en su software, entonces podrá corregir los errores antes de comenzar a trabajar para crear una prueba dividida completa.
Una prueba A/A es simplemente un método seguro para despejar la pista antes de la prueba dividida más completa y ponderada.
Algunos probadores experimentados no están de acuerdo en que las pruebas A/A sean necesarias. ¿Por que no? Porque han encontrado métodos alternativos para calificar los datos y garantizar la precisión de su prueba.
Si eres como Craig Sullivan y tiene mucha experiencia, acceso a la integración de análisis, pruebas de dispositivos y navegadores cruzados, análisis de datos triangulados, observaciones de instrumentación y monitoreo de compatibilidad, entonces es posible que no tenga que hacer una prueba A/A.
Pero si es un poco normal, continúe y realice una prueba A/A: compare dos versiones de lo mismo. Si los resultados de la prueba A/A son similares, entonces está listo para continuar con su prueba dividida. Si los resultados son muy diferentes, sabe que tiene más trabajo de preparación que hacer.
Una vez que la prueba A/A se ve bien, puede comenzar su primera prueba A/B.
A los especialistas en marketing les gusta probar las pequeñas cosas… como el impacto del color del botón en los CTR.
No me opongo a probar el color de los botones, pero este es un excelente ejemplo de prueba desperdiciada.
¿Por qué? Porque deberías estar probando las cosas grandes: conversiones de macros.
El objetivo de las pruebas divididas es mejorar conversiones, pero no todas las conversiones son iguales. Aconsejo a los especialistas en marketing que prueben las cosas grandes, las cosas importantes, las cosas que generan ingresos.
Hay un momento y un lugar para el análisis granular de las microconversiones y las perspectivas detalladas, pero primero pruebe las cosas más importantes.
Uri Bar-Joseph tiene una gran palabra de consejo sobre qué probar: “Si bien todo es comprobable, no todo debe probarse. Utilice siempre el sentido común.“
¿Cómo debe decidir qué probar? Tengo cuatro sugerencias. Cada uno está vinculado a recursos detallados.
Cuanto más ansioso esté el probador, más probable es que cambie más de una cosa.
Si va a ejecutar una prueba dividida, solo debe probar una variable a la vez. Por ejemplo…
¿Por qué es esto tan importante? Quiere saber exactamente qué cambio produjo qué resultados.
La prueba dividida está diseñada para aislar y probar solo una elemento a la vez.
Si va a probar varios elementos, llámelo prueba multivarianteno una prueba dividida.
Una hipótesis es su suposición o predicción sobre cómo resultará la prueba.
Si no forma una hipótesis antes de ejecutar una prueba, entonces se quedará rascándose la cabeza en cuanto a por qué era importante y qué cambios debe hacer.
Antes de ejecutar su prueba, piense: «Voy a predecir que si cambio X, entonces tendrá el impacto de Y». Llame a un ganador, luego ejecute la prueba.
Cuando analiza los resultados, puede determinar mejor si el cambio es aconsejable o no, qué tan importante es y los resultados que espera ver como resultado de realizar ese cambio.
Unbounce sugiere dar con:
Cuanto mejor pueda formular una hipótesis, más procesables serán los resultados de su prueba dividida.
No existen las pruebas divididas «rápidas». Los datos tardan en acumularse. Necesita saber cuándo se completa la prueba antes de finalizarla o sacar conclusiones.
El mayor error que comete la gente es llamar a la prueba «estadísticamente significativa» aunque no lo sea. Muchas formas de software de prueba le dirán cuándo la prueba es «estadísticamente significativa». La significación estadística es un nivel de confianza porcentual.
Entonces, por ejemplo, un nivel de confianza del 99,9 % sería alto, lo que significa que la prueba tiene solo un 0,1 % de probabilidad de ser inexacta.
El problema con la significancia estadística es que puede ser engañosa.
Un software de prueba puede llamar a una prueba «estadísticamente significativa», pero el software podría estar utilizando un umbral de significación bajo. En software como VWO, puede cambiar la configuración de umbral predeterminada. Si no lo hace, podría caer en la trampa de pensar que una prueba es estadísticamente significativa, cuando en realidad no lo es.
Seguir los resultados de la prueba dividida de otra persona es como usar los anteojos de otra persona. Intenta corregir un problema que no tienes.
me gusta leer estudios de casos cómo todo el mundo. Es divertido ver qué prueba ganó y descubrir qué optimizadores están descubriendo en sus sitios.
Pero adivina que. Todos estos datos son inútil para ti.
¿Por qué? Porque es la prueba de otra persona, en el sitio de otra persona, en la industria de otra persona, con la audiencia de otra persona, probando el tráfico de otra persona, en el producto o servicio de otra persona. El resultado de la prueba ha absolutamente ninguna aplicación para usted excepto para satisfacer su curiosidad.
¡Los únicos resultados de prueba sobre los que puede actuar son los resultados que obtiene al ejecutar pruebas en su propio sitio!
Los sitios web y blogs de pruebas populares presentan artículos con «resultados impactantes de la prueba dividida.” Dichos artículos obtienen excelentes clics, pero proporcionan muy poco valor real.
Cuando tales artículos explican los resultados de las pruebas, dan la impresión de que esos resultados son universalmente aplicables. Entonces, ¿qué hacen los vendedores crédulos y los CRO? Aplican la lección del resultado de la prueba a su propio sitio web.
¡Esto es un gran error! El estudio de caso de prueba dividida fue solo eso: un estudio de caso, no una ley inquebrantable que todos deberían seguir. Puede probar lo mismo en su sitio, pero no siga los resultados de las pruebas de otros sin probar.
No hay un color que siempre convierta más alto, o una palabra mágica que produzca más conversiones. Solo existe el poder de probar su propio sitio.
No se limite a probar por probar. Prueba en aras de tasas de conversión más altas.
Ejecute cada prueba con un solo objetivo final: mejorar sus conversiones. Ejecutar pruebas requiere tiempo y recursos. Para obtener el ROI más alto por su tiempo y esfuerzo, asegúrese de realizar cambios como resultado de lo que aprende.
Las pruebas solo se pueden considerar exitosas si implementa sus resultados.
Esto puede parecer muy obvio, pero hay muchas organizaciones que tienen los recursos para realizar pruebas, pero no tienen recursos disponibles para hacer cambios. Asegúrese de que todos estén en la misma página con las pruebas:
Creo que las pruebas divididas son una actividad de marketing con uno de los ROI más altos. Al probar, analizar e implementar, puede obtener más conversiones de su tráfico existente. Eso es poderoso.
Me duele cuando veo que los optimizadores desperdician este potencial al cometer estos errores. Verifique su propio enfoque de prueba dividida. Vea si está violando alguna ley y revise sus pruebas divididas en consecuencia.
Creo que verás algunas mejoras importantes.
¿Cuáles son algunos errores de pruebas divididas que ves que la gente comete?
