Obama y el Split Testing

Hace unos días me encontré con un artículo muy interesante en el blog de Optimizely, una herramienta que facilita el A/B Testing, sobre como el equipo de Obama logró incrementar en el 2007 el porcentaje de conversión de una landing page destinada a donaciones gracias a un simple experimento.

Este simple experimento que consistía en probar distintas variaciones de imagenes y calls to action en la landing page les permitió cambiar el curso de la campaña.

Las secciones de la landing page a testear fueron llamadas “Media” (para la imagen superior) y “Button” (para el botón con el call to action).

Durante el experimento se testearon 6 tipos de “Media” distintos (3 imagenes y 3 videos) y 4 botones, lo que da un total de 24 combinaciones, el experimento se llevó a cabo utilizando el Google Website Optimizer.

Los botones fueron todos del mismo formato, nada más variando el call to action, se utilizaron los siguientes calls to action: “Sign Up”, “Sign Up Now”, “Learn More” y “Join Us Now”.

Pueden ver las distintas imágenes y videos que se probaron durante el experimento haciendo click en el siguiente enlace: Splash Page Experiment

Resultados

La métrica para medir el éxito de la campaña fué el porcentaje de visitantes que se suscribían, la combinación ganadora fué esta:

El porcentaje de conversiones  de la versión ganadora fué de 11,6%. lo que representa una mejora del 40,6% en cuanto al porcentaje de conversiones de la landing page original de nada más 8,22%

Se estima que gracias al incremento en el porcentaje de conversiones se pudieron recaudar 60 millones de dólares extra en donaciones.

Cabe resaltar que los miembros del staff de Obama tenían preferencia por los videos antes que por las imágenes y consideraban utilizarlos en la landing page, esto hubiese sido un error tremendo puesto que durante el experimento los videos presentaron el peor desempeño.

La Moraleja

Muchas veces las decisiones se toman basándonos en suposiciones y en el peor de las casos se basan únicamente en el gusto personal de la persona de mayor jerarquía.

Gracias al gran arsenal de herramientas de las que disponemos hoy en día, muchas inclusive gratuitas, resulta cuanto menos tonto tomar decisiones de este modo.

Con un poco más de esfuerzo se pueden tomar decisiones a partir de hechos concretos en lugar de preferencias propias.

Y ustedes qué experiencia con el Testing pueden compartir? 😉

Pueden ver el artículo original acá: Optimizely Blog

3 Comments

Join the discussion and tell us your opinion.

Germán
diciembre 8, 2010 at 12:53 am

Guillermo,

Excelente post! Un claro ejemplo de cómo debe trabajar un profesional del rubro, razonando y buscando la mejor manera de hacer las cosas. Me quedo con el detalle de que Obama recaudó 60 millones de dólares adicionales por este sutil cambio en la landing page, ¡un número para nada despreciable!

Saludos!!

Guille
diciembre 8, 2010 at 12:44 pm
– In reply to: Germán

Gracias por el comentario Germán!

Hacer tests con los distintos elementos de una campaña es fundamental para mejorar el desempeño, algo que se debería hacer siempre como parte del cronograma habitual de trabajo y no como excepción.

Saludos!

Guille

Laura
noviembre 1, 2011 at 6:11 pm

Muy interesante el experimento. Enhorabuena!

Leave a reply

CommentLuv badge

Este sitio usa Akismet para reducir el spam. Aprende cómo se procesan los datos de tus comentarios.