Durante las últimas semanas he realizando un test A/B para mejorar la forma en la que se eliminaban los productos de una cesta de un ecommerce y los resultados arrojados son bastante interesantes.
Partíamos de una interfaz anticuada, dónde el producto se eliminaba con una doble acción (check + botón update). Tras analizar los resultados, adelanto, que la conversión no ha aumentado bruscamente, como yo esperaba, pero si ha mejorado un poco eliminado esta interacción doble.
En total comparamos junto con la versión original, un botón X rojo o un cubo de basura.
Resultados test A/B mejor cesta
Los resultados no son del todo esclarecedores, ya que ambas versiones de la modificación ganan en algunas métricas importantes.
- Mejor conversión: Cubo de Basura: 27.52% vs 27.03% (Original: 26.27%).
- Mejor media de pedido: X Roja: +5.04€ (respecto al cubo de basura).
La conclusión clara con este Test A/B, es que la opción original es mejorable. Hay opciones en las que la conversión es mejor y también la media del carrito. Este último resultado si me ha sorprendido, porque si os fijáis el “eliminar” de la cesta de Amazon está muy bien camuflado. Yo también pensaba que poníendolo dificil podría ser mejor, pero para los usuarios parece que no.
A priori con estos resultados podríamos decir, mejor conversión siempre. Pero viendo que la diferencia tras analizar el comportamiento de decenas de miles de usuarios y con una ventaja tan poco significativa del cubo de basura, era necesario ver otros parámetros.
Pese a que la X roja pierda respecto al cubo de basura en conversión, gana en otras métricas interesantes de uso del sitio.
- %Rebote en la cesta: X Roja: 19.74% vs 22.18% (Original: 22.30%). Este resultado es muy significativo, ya que el % de usuarios que abandona la tienda online en la cesta es inferior cuando se usan las aspas rojas, boton tradicional para una acción eliminar/borrar. Además sorprende que dificultar eliminar un producto de la cesta no sea sensiblemente más relevante en cuanto al abandono.
- Páginas vistas: X Roja: 29,37 vs 28,41 (Original: 26.70).
X roja el icono “borrar” ganador.
Así que con estos datos a la vista y aunque una X roja es menos estética que un icono con forma de cubo de basura hay que declararlo vencedor. En el próximo capítulo analizaremos cual es la mejor ubicación. Hagan sus apuestas.
(*) Notas
- La muestra de usuarios es suficientemente válida ya que han pasado por el experimento del orden de cinco ceros.
- Para evitar desviaciones de azar, también se ha analizado la frecuencia con la que aparecían los resultados diariamente y en un 75-80% de los días se repetía el patrón de resultados.
A veces se echa en falta más ejemplos como estos al hablar de UX. Pedazo de post!
Si yo sigo buscando resultados de alguien que argumente porque es mejor un megamenú en un ecommerce que un árbol de categorías clásico 😀
Por cierto, no lo he matizado, pero por si alguien lo lee, estos
resultados tienen sentido en el contexto del experimento, es decir son
válidos para la web analizada.
Los resultados de un test A/B no son universales y siempre hay que analizarlos en el contexto donde se aplican y con las «personas» que lo usan.