En anteriores artículos hemos hablado sobre a/b y multivariate testing y cómo aplicar esta u otras técnicas con Google Website Optimizer. Para refrescar la memoria o para introducir a nuevos lectores (bienvenidos!!) os recomiendo las lecturas:

A/B testing mas a fondo

Conociendo los test que podemos hacer con Website Optimizer

Tu primer experimento en Google Website Optimizer paso a paso

Por otro lado también haremos un repaso de los pasos que hemos dado antes de poder empezar a analizar resultados:

1. Hemos analizado nuestro site y hemos detectado que páginas o secciones son las candidatas a optimizar.
2. Hemos planificado un calendario de trabajo y hemos anotado nuestras hipótesis.
3. Tenemos planeadas que secciones (variables) queremos testear.
4. Hemos pensado y creado las variaciones para cada sección.
5. Tenemos el código implementado (si no somos de perfil un poco técnico o si simplemente no tenemos acceso al código deberemos pedir ayuda a nuestros compañeros de IT).

Hechémosle un vistazo a esos reports

Con el test en marcha, GWO nos pone a nuestra disposicion 2 informes en las pestañas “Combinaciones” y “Secciones de página”. Vamos a verlos un poco en detalle.

:: Combinaciones ::

El informe de combinaciones trata de darnos de una forma muy clara y rapida, cual es la relación entre cada una de las combinaciones del test y su repercusión al ratio de conversión. Para ello en primer lugar nos informa de la efectividad de la página original y en base a ella, nos dice qué combinación rinde más o rinde menos respecto a esta.

El report nos ofrece los siguiente datos:

• Estado: Nos indica si la combinación en cuestión esta habilitada o no. Al empezar ell test todas las combinaciones salen como habilitadas, pero si vemos que alguna de ellas nos rinde muy poco podemos desactivarla para que el test siga con las variaciones restantes. Una vez deshabilitamos una combinación no podremos volver a habilitarla.
• Porcentaje de conversiones estimado: Este dato viene de la mano de un grafo o representación que es el que nos da las primeras conclusiones. En base a la página original como referencia, nos indica el grado de efectividad de la combinación. Todo muy visual. Verde, bueno. Rojo, malo. Esta claro, no? En realidad lo que nos indica es el ratio de conversión actual +/- un intervalo de confianza.
• Posibiliad de superar al original: Esta columna nos da informacion relativa a la capacidad de una combinación de superar en rendimiento a la original. Según la documentación de Website Optimizer, si la posibilidad de superar al original es mayor que el 95%, toda la barra nos aparecerá verde y tendremos con fiabilidad un buen candidato a reemplazar la página original. Este cálculo se efectua en base a un 95% de nivel de confianza por lo que si tenemos una combinación ganadora, podremos estar al 95% seguros que la combinación es mejor por algo mas que no sea por motivos aleatorios o suerte. Le podéis decir a vuestro amigo incrédulo que habéis encontrado algo que funciona mejor sin miedo.
• Mejora observada: La mejora observada suele fluctuar al inicio de los test o en aquellos con bajo tráfico. Nos expresa el porcentaje de mejora de una combinación respecto la combinación original, o lo que es lo mismo, nos da el valor de dividir el ratio de conversión de una combinación con el ratio de conversión del original. Debemos esperar a tener gran cantidad de datos para tomarlo en consideración.
• Conversiones/visitas: Pues exactamente eso, las conversiones y las visitas de cada combinación.

:: Secciones de página ::

Mientras que el informe de combinaciones nos evalua el rendimiento de las combinaciones (parece obvio jeje), el informe de secciones de página nos da interesantes apreciaciones sobre el impacto de las variaciones en cada sección.

En este informe obtenemos los mismos datos que en el informe anterior con un nuevo dato muy intersante:

• Valoración de relevancia: A mi entender este apartado es el mas interesante de todo el informe. Nos aporta el grado de impacto (del 1 al 5) de una determinada sección al experiemento. Si por ejemplo hago un test y encuentro una combinación ganadora, luego con este informe puedo inspirarme para determinar cual puede ser mi siguiente foco de atención. Imaginemos que este report nos dice que a seccion 1 (que es donde he testeado el headline) me dice que tiene una puntuación de 0 o 1, entiendo que las variaciones de esta sección eran bastante parecidas y que no han influido en el resultado del test. Quizá en el siguiente experimento seré más agresivo ene ste apartado… Aun así, ojo con este apartado. Un mal resultado no siginifica una mala sección. Quizá otra sección ha dominado la influencia sobre el resultado, pero no por eso nuestro headline, imagen, copy o lo que sea tiene que ser malo.

Tags: A/B Testing, Google Website Optimizer, informes, Multivariate Testing, Tutoriales

Si te interesa la analítica web y deseas aprender más, no deberías perderte nuestras próximas sesiones del curso Analítica Web - Habilidades para analistas que impartirán nuestros especialistas en Analítica Web en Madrid y Barcelona durante el mes de Noviembre.