Pruebas A/B

Una prueba A/B manda versiones distintas del mismo correo a grupos pequeños de la audiencia, mide cuál funciona mejor y reserva el grueso de los destinatarios para la versión ganadora.

Sirve para dejar de discutir sobre qué asunto funciona mejor y averiguarlo. Nadie recibe el correo dos veces: cada destinatario entra en una sola versión.

Antes de comenzar

Necesitas acceso al área como Usuario del área. Consulta Roles y permisos.
Ten una audiencia lo bastante grande. Con doscientos destinatarios, la diferencia entre dos versiones es ruido, no resultado.
Decide qué vas a comparar y cambia solo eso entre versiones. Si cambias el asunto y el diseño a la vez, el resultado no te dirá cuál de los dos hizo la diferencia.
Define con qué criterio vas a decidir el ganador antes de enviar, no después de ver los números.
Si quieres que la ganadora salga sola, la agrupación en campañas debe estar activada en la página de ajustes del área. Sin esa opción, la prueba funciona igual, pero la ganadora hay que enviarla a mano.

Procedimiento

1. Activar la prueba en la primera versión

Abre el envío en estado Borrador.
Entra a la sección de pruebas A/B.
Activa la opción de permitir la prueba A/B.
Indica el porcentaje de la audiencia que recibirá esta versión. El valor inicial suele ser 10 %, y puedes ajustarlo.
Elige el criterio de selección de la versión ganadora. Hay más opciones de las que la gente supone:
- Selección manual: decides tú al ver los resultados.
- Mayor tasa de apertura: es el valor por defecto.
- Mayor tasa de clics o mayor tasa de respuesta.
- Mejor resultado comercial: según las oportunidades, las cotizaciones o los ingresos que haya generado cada versión. Estos criterios aparecen cuando las áreas comerciales correspondientes están instaladas. Son los más exigentes y los más honestos cuando el correo persigue una venta.
Indica la fecha de envío final: el momento en el que se decidirá la ganadora y saldrá al resto de la audiencia.

2. Crear la versión alternativa

No montes un segundo envío a mano. Desde el mismo envío, usa la acción de crear una versión alternativa: genera la otra versión arrastrando la configuración de la prueba y la audiencia, y solo tienes que cambiar el elemento que quieres comparar.

El criterio de selección y la fecha de envío final son comunes a todas las versiones: si los cambias en una, cambian en las demás.

Asigna a esta versión su propio porcentaje. Entre todas las versiones no deberías repartir más de una parte de la audiencia: el resto queda reservado para recibir la ganadora.

3. Enviar las versiones de prueba

Manda las versiones y espera. Consulta Probar, programar y enviar.

Dale tiempo antes de decidir. Las aperturas se acumulan durante horas: juzgar a los quince minutos es juzgar quién estaba mirando el correo en ese momento, no qué versión es mejor. Ese es justamente el margen que compras al fijar la fecha de envío final con holgura.

4. El envío de la versión ganadora

Pasada la fecha de envío final, la plataforma compara las versiones según el criterio que definiste y manda sola la ganadora a la parte de la audiencia que quedó reservada. No tienes que hacer nada, con dos matices:

Requiere la agrupación en campañas activada. Es esa opción la que pone en marcha la selección automática. Sin ella, la fecha de envío final no dispara nada.
No sale a la hora exacta. La comprobación se hace una vez al día, así que la ganadora puede salir hasta un día después de la fecha indicada.

Desde la sección de pruebas A/B del envío tienes además estas acciones:

Comparar versiones: abre todas las versiones de la prueba juntas, con sus métricas.
Enviar la ganadora ahora: aplica el criterio en ese momento y manda la ganadora sin esperar a la fecha. Es la vía cuando la selección automática no está disponible.
Seleccionar como ganadora: con el criterio de selección manual, eres tú quien revisa las métricas de cada versión y marca la que debe salir.

En cualquiera de los casos, la ganadora se genera como un envío nuevo, marcado como versión final, que llega solo a quien no recibió ninguna de las versiones de prueba.

Resultado

Cada versión tiene sus propias métricas, comparables entre sí.
El resto de la audiencia recibe la versión que mejor funcionó, de forma automática salvo que hayas elegido la selección manual.
Ningún destinatario recibe el correo más de una vez.

Consideraciones

Cambia una sola cosa a la vez. Es la regla que hace que la prueba signifique algo. Asunto, o remitente, o contenido: nunca dos.
La fecha de envío final es una decisión, no un trámite. Salvo con la selección manual, y si la agrupación en campañas está activada, a partir de esa fecha el correo sale al grueso de la audiencia sin que nadie lo confirme. Ponla con holgura suficiente para que los resultados se estabilicen, y revísala si cambias el calendario del envío.
La apertura no siempre es el criterio correcto. Un asunto sensacionalista sube las aperturas y baja los clics. Si el correo busca que alguien haga algo, mide clics.
Una diferencia pequeña no es una diferencia. Si una versión saca un 21 % y la otra un 22 %, no hay ganadora: elige la que prefieras y no saques conclusiones.
Documenta lo que aprendiste. El valor de una prueba A/B no está en este envío, sino en los siguientes. Si el resultado no se anota en ningún sitio, la prueba se repetirá dentro de seis meses.
No pruebes por probar. Si el envío es urgente o la audiencia es pequeña, manda una sola versión.
Reparte solo una parte de la audiencia entre las versiones. Si los porcentajes suman el total, no queda nadie para recibir la ganadora y la prueba pierde su sentido: habrás mandado dos correos distintos en lugar de aprender cuál funciona mejor.