Última actualización: 25-09-2024
En Acrelia puedes crear experimentos que te ayuden a obtener mejores resultados en tus envíos de email. En este artículo, te explicaremos todo lo que necesitas saber para sacarle el máximo provecho a esta funcionalidad.
1. ¿Qué es un test A/B?
2. ¿Qué debes tener en cuenta antes de hacer un test A/B?
2.1 Determinar la variable que vas a usar
2.2 Definir el tamaño de la muestra
2.3 Considerar el tiempo de espera
3. Tipos de test A/B en Acrelia
3.1 Test A/B por asunto del mensaje
3.2 Test A/B por remitente
3.3 Test A/B por contenido
3.4 Test A/B por fecha de envío
4. Cómo configurar y enviar un test A/B en Acrelia
4.1 Configurar y enviar un test A/B por asunto
4.2 Configurar y enviar un test A/B por remitente
4.3 Configurar y enviar un test A/B por contenido
4.4 Configurar y enviar un test A/B por fecha de envío
5. Gestión de los experimentos
5.1 Pausar/eliminar test A/B
5.2. Elección del ganador
5.3 Estadísticas de los envíos
6. Funcionamiento del test A/B
6.1 Decisiones
6.2 Versión web
6.3 Campañas con contenido dinámico
Un test A/B en email marketing consiste en crear dos combinaciones de una campaña para obtener datos, poder compararlos e identificar aquella combinación que ha obtenido los mejores resultados una vez hecho el envío.
Las dos combinaciones se hacen mediante el cambio de uno de los elementos de la campaña de email (asunto del mensaje, contenido, fecha de envío, remitente...) y se envían a una muestra de dos grupos diferentes generada de forma aleatoria que contienen el mismo número de contactos. Una vez identificada la variación ganadora, se realiza un envío de esta campaña al resto de suscriptores.
Antes de lanzar las campañas de tu experimento, debes tener claros ciertos elementos fundamentales para crear el test A/B y que este sea efectivo.
Para obtener una conclusión precisa en este tipo de pruebas debes cambiar un único elemento. Si añades más de una variable, es muy complicado determinar cuál de ellas fue la que marcó la diferencia.
Ejemplos de variables con las que puedes hacer el experimento:
Para que los datos de un test A/B de email marketing sean significativos, es necesario tener un número considerable de contactos para cada variante. Es recomendable que la cantidad no sea inferior a 5.000 contactos.
Además, cuando la lista de contactos tenga menos de 1.000 suscriptores, es aconsejable ajustarse a la regla 80/20, también conocida como principio de Pareto. Consiste en enviar una variable al 10% de los contactos, la otra variable a otro 10% y al 80% aquella que haya obtenido los mejores resultados. Más información sobre el Principio de Pareto.
En Acrelia, para poder crear un test A/B debes escoger una lista o segmento que contenga almenos 3 contactos.
Dejar que las pruebas se ejecuten durante el tiempo suficiente ayudará a tener más probabilidades de eligir al ganador adecuado. Recomendamos esperar al menos 2 horas para determinar un ganador según las aperturas y 1 hora para determinar un ganador según los clics.
Para las aperturas, se estima que si se esperan 2 horas, hay un porcentaje de precisión del 80%. Si el tiempo de espera es de 12h es del 90% y si es de 24 horas, este porcentaje sube hasta el 99%.
En cuanto a los clics, se estima que si se espera 1 hora, hay un porcentaje de precisión del 83%, si pasan 5 horas, este porcentaje sube hasta el 95% y si se espera 1 día, el porcentaje de precisión es casi del 100%.
Ten en cuenta que cada lista de contactos es única, por lo que estos valores pueden variar en cada caso. Por eso, puedes hacer varios test A/B y experimentar con diferentes métricas y duraciones para ayudar a determinar cuál produce los mejores resultados en tu caso particular.
En Acrelia hay 4 tipos de test dependiendo de la variable con la que quieras experimentar.
Consiste en usar dos asuntos con algún elemento distinto (por ejemplo, uso o no de emojis, mayor o menor extensión, personalizándolo una de las opciones...). El experimento te permitirá saber cuál de las dos combinaciones ha obtenido mejores resultados. También podrás hacer la prueba con dos versiones de preencabezado.
Consiste en usar dos remitentes distintos (por ejemplo, nombre de la empresa vs nombre de la persona que lo envía o nombre de la empresa vs nombre del departamento más nombre de la empresa). También puedes "jugar" con la dirección de correo que usarás como remitente.
Consiste en diseñar dos campañas con algún elemento del diseño distinto (imágenes, llamadas a la acción, estructura...).
Consiste en el envío de dos campañas iguales en distinta franja horaria o en una fecha diferente.
Para hacer cualquiera de los experimentos deberás acceder desde el menú principal a la sección "Test A/B" y hacer clic en "Crear nuevo experimento".
Lo primero que deberás rellenar es el nombre que quieres darle al test (apartado "Nombre del experimento"), a continuación seleccionar la lista o segmento con la que quieres hacerlo (apartado "Destinatarios") y por último seleccionar uno de los cuatro tipos de Test A/B que tenemos disponibles (apartado "Tipo de experimento").
En la siguiente pantalla debes determinar la división de la muestra, es decir, el porcentaje de contactos a los que se les enviará cada una de las versiones y el porcentaje de contactos a los que se les enviará la versión ganadora. Para hacerlo solo tienes que mover el selector de la barra de desplazamiento horizontal (en este apartado, recuerda los consejos que te hemos dado en la sección 2.2 de este mismo artículo).
En este paso también se debe decidir si la elección del ganador la quieres hacer tú mismo (manualmente) y lanzar la campaña final cuando consideres, o bien si quieres que lo calcule el sistema (automáticamente) según la variable que indiques (aperturas o clics). En este segundo caso, tendrás que decidir el tiempo que quieres que pase desde la finalización de los envíos iniciales hasta que el sistema calcule el ganador (mínimo 2 horas en caso de aperturas, mínimo 1 hora en el caso de clics) e informar la franja horaria durante la cual quieres que se inicie el envío ganador (franja segura de envío para evitar que la campaña se envía en horas que no son interesantes para tu público, como por ejemplo, por la noche).
*En el caso del test A/B según contenido, esta configuración no se tendrá que hacer ya que el envío se hace a toda la base de datos (50% A - 50% B).
Para crear tu test A/B según asunto, como has podido ver, primero debes acceder a la opción "Test A/B" del menú principal y hacer clic en "Crear nuevo experimento". En la pantalla inicial, deberás escribir un nombre para el experimento (se trata de algo interno que no verán tus suscriptores), seleccionar la lista o segmento y escoger en el apartado "Tipo de experimento" la opción "Asunto".
En la siguiente pantalla será el momento de definir la muestra con la barra de desplazamiento y configurar la elección del ganador (si es manual o automática). Los detalles los puedes ver en la introducción de este mismo apartado.
Configuración del test A/B
A continuación, selecciona la campaña que quieres enviar haciendo clic en la imagen "Seleccionar campaña". Se habilitará un desplegable con todas las campañas que tengas creadas. Una vez localizada, haz clic en "Seleccionar".
En la rueda de configuración, podrás editar el remitente que querrás usar, el idioma de los formularios de baja y actualización así como el correo de respuesta.
Cuando ya tengas la campaña configurada, deberás definir los dos asuntos y los dos preencabezados:
Haz clic en "Siguiente" para continuar con la creación y envío del experimento.
Fecha y hora de envío
En el siguiente paso simplemente deberás marcar si quieres enviar ya las campañas (combinaciones A/B) o bien prefieres programarlas para más adelante. Una vez definido esto, haz clic en siguiente.
Resumen y envío del experimento
En la última pantalla visualizarás un resumen de todo aquello que has configurado de tu test A/B. Una vez confirmado que está todo bien, haz clic en "Enviar" para lanzar o programar tus envíos.
Para consultar el estado de tus envíos, accede en el menú principal a "Test A/B" - "Gestionar experimentos".
Para crear tu test A/B según remitente, como hemos visto, primero debes acceder a la opción "Test A/B" del menú principal y hacer clic en "Crear nuevo experimento". En la pantalla inicial, deberás escribir un nombre para el experimento (se trata de algo interno que no verán tus suscriptores), seleccionar la lista o segmento y escoger en el apartado "Tipo de experimento" la opción "Remitente".
En la siguiente pantalla será el momento de definir la muestra con la barra de desplazamiento y configurar la elección del ganador (si es manual o automática). Los detalles los puedes ver en la introducción de este mismo apartado.
Configuración del test A/B
A continuación, selecciona la campaña que quieres enviar haciendo clic en la imagen "Seleccionar campaña". Se habilitará un desplegable con todas las campañas que tengas creadas. Una vez localizada, haz clic en "Seleccionar".
En la rueda de configuración, podrás editar el asunto del mensaje y el idioma de los formularios de baja y actualización.
Una vez configurada la campaña, es hora de definir el remitente de cada combinación así como el correo de respuesta que usarás.
Fecha y hora de envío
En el siguiente paso simplemente deberás marcar si quieres enviar ya las campañas o bien prefieres programarlas para más adelante. Una vez definido esto, haz clic en siguiente.
Resumen y envío del experimento
En la última pantalla visualizarás un resumen de todo aquello que has configurado en tu test A/B. Una vez confirmado que está todo bien, haz clic en "Enviar" para lanzar o programar tus envíos.
Para consultar el estado de tus envíos, accede en el menú principal a "Test A/B" - "Gestionar experimentos".
Para crear tu test A/B según contenido, primero debes acceder a la opción "Test A/B" del menú principal y hacer clic en "Crear nuevo experimento". En la pantalla inicial, deberás escribir un nombre para el experimento (se trata de algo interno que no verán tus suscriptores), seleccionar la lista o segmento y escoger en el apartado "Tipo de experimento" la opción "Contenido".
En la siguiente pantalla será el momento de definir la muestra con la barra de desplazamiento y configurar la elección del ganador (si es manual o automática). Los detalles los puedes ver en la introducción de este mismo apartado.
Configuración del test A/B
A continuación, selecciona las dos campañas que quieres enviar haciendo clic en la imagen "Seleccionar campaña". Se habilitará un desplegable con todas las campañas que tengas creadas. Una vez localizada, haz clic en "Seleccionar". Ten en cuenta que el sistema no te dejará seleccionar una misma campaña.
En la rueda de configuración, podrás editar el remitente que querrás usar, el idioma de los formularios de baja y actualización así como el correo de respuesta.
Una vez seleccionadas las dos campañas, deberás definir un mismo asunto y un mismo preencabezado para ambas.
Para pasar al siguiente paso, haz clic en "Siguiente".
Fecha y hora de envío
En el siguiente paso simplemente deberás marcar si quieres enviar ya las campañas o bien prefieres programarlas para más adelante. Para acceder al último paso, haz clic en "Siguiente".
Resumen y envío del experimento
En la última pantalla visualizarás un resumen de todo aquello que has configurado de tu test A/B. Una vez confirmado que está todo bien, haz clic en "Enviar" para lanzar o programar tus envíos.
Para consultar el estado de tus envíos, accede en el menú principal a "Test A/B" - "Gestionar experimentos".
Para crear tu test A/B según la fecha de envío, primero debes acceder a la opción "Test A/B" del menú principal y hacer clic en "Crear nuevo experimento". En la pantalla inicial, deberás escribir un nombre para el experimento (se trata de algo interno que no verán tus suscriptores), seleccionar la lista o segmento y escoger en el apartado "Tipo de experimento" la opción "Fecha de envío".
Configuración del test A/B
A continuación, selecciona la campaña que quieres enviar haciendo clic en la imagen "Seleccionar campaña". Se habilitará un desplegable con todas las campañas que tengas creadas. Una vez localizada, haz clic en "Seleccionar".
En la rueda de configuración, podrás editar el asunto, el remitente, el idioma de los formularios de baja y actualización y la dirección de correo que usarás para el envío.
Fecha y hora de envío
En el siguiente apartado deberás definir la fecha y hora de envío de ambas combinaciones. Recuerda que en este tipo de test no es posible poner la misma fecha y hora en ambas campañas. Haz clic en el botón "Siguiente" para acceder al último paso.
Resumen y envío del experimento
En la última pantalla visualizarás un resumen de todo aquello que has configurado de tu test A/B. Una vez confirmado que está todo bien, haz clic en "Enviar" para lanzar o programar tus envíos.
Para consultar el estado de tus envíos, accede en el menú principal a "Test A/B" - "Gestionar experimentos".
En este apartado podrás ver el estado de tus test A/B. Estos son los distintos estados en los que puede estar tu experimento:
En este apartado, también podrás consultar las estadísticas, pausar o eliminar el test si aún no se ha ejecutado y seleccionar el ganador en caso de haber escogido la opción manual.
Si los envíos aún no han empezado (es decir, el estado del experimento es "Envíos A/B en cola"), accediendo a "Test A/B" - "Gestionar experimentos" en la barra de opciones podrás pausar o cancelar el experimento.
Si accedes al interior del mismo, también tendrás oportunidad de pausarlo o eliminarlo.
Ten en cuenta que ambas acciones afectan a todo el experimento, es decir, si lo pausas, pausarás los envíos de ambas combinaciones y si lo eliminas, lo cancelarás en su totalidad.
También tendrás la opción de cancelar/pausar el envío de la combinación ganadora si aún no se ha iniciado su envío.
En los test A/B de Acrelia puedes elegir tú mismo el ganador o bien configurarlo de tal forma que, según la variable escogida, sea el sistema quién lo escoja y haga el envío ganador de forma automática.
Selección manual del ganador
En el segundo paso de la creación y configuración de tu experimento, si escoges en el apartado "Elección del ganador" la opción "Manualmente", una vez finalizados los envíos de las dos combinaciones, tendrás que acceder a "Test A/B" - "Administrar test A/B" y una vez dentro, seleccionar la opción ganadora (botón Ganador A o botón Ganador B). Para tomar la decisión más adecuada, dispondrás de todas las estadísticas de ambos envíos.
Una vez seleccionada la combinación ganadora y hecho el envío, tendrás disponibles las estadísticas de la campaña ganadora en la misma sección.
Selección "automática" del ganador
En el segundo paso de la creación y configuración de tu experimento, si escoges en el apartado "Elección del ganador" la opción "Automáticamente" el sistema una vez finalizado el envío de las combinaciones A y B (y pasado el tiempo que has configurado previamente), seleccionará el ganador según la variable que hayas escogido (aperturas y clics).
Dentro de "Test A/B" - "Administración de experimentos", si accedes al experimento, verás que el sistema marcará con un recuadro amarillo la combinación ganadora.
Las estadísticas que tienes de cada envío en tus test A/B son las mismas que tienes en tus envíos habituales. Para acceder a ellas, debes acceder en el menú principal a "Test A/B" - "Administrar experimentos" y acceder al test A/B correspondiente. Verás que dentro de cada experimento tendrás las estadísticas de ambas combinaciones y las estadísticas del envío ganador (una vez se haya lanzado).
Para más información sobre el significado de cada uno de los indicadores estadísticos que mostramos en las campañas enviadas, visita este otro artículo.
Antes de lanzar tu experimento, hay varias consideraciones que debes tener en cuenta sobre el funcionamiento del Test A/B en Acrelia.
Hay que tener en cuenta que, en el caso de que ninguno de tus destinatarios abra o haga clic en tus dos combinaciones, el grupo final de destinatarios recibirá la última combinación de forma predeterminada (en caso de seleccionar la opción de envío automático del ganador). Esto podría ocurrir si envías tu prueba a muy pocos destinatarios.
Por otro lado, si el mismo número de personas hace clic o abre tus combinaciones, la primera combinación será la que se enviará a tus destinatarios restantes (también, en caso de haber seleccionado la opción de envío automático al ganador).
Todas las campañas creadas con el editor de Acrelia, tienen en la parte superior un enlace para visualizar el envío en el navegador. Si un contacto al que le has enviado una de las combinaciones del experimento abre el correo electrónico en su navegador, siempre verá la combinación de prueba que recibió, aunque la combinación ganadora sea diferente.
Por otro lado, si tienes activo el histórico de tus campañas, aparecerá la combinación ganadora. No obstante, si un suscriptor consulta la versión web de la campaña recibida, visualizará su combinación, no la ganadora.
Como hemos comentado anteriormente en este mismo artículo, para poder identificar qué elementos son los que hacen que una campaña tenga mejores resultados es fundamental experimentar con una única variable. Dado que las campañas con contenido dinámico añaden otras variaciones en el contenido y, por lo tanto, entran en juego más elementos, no están habilitadas para usarlas en los test A/B.
Agenda una demo gratuita
Nuestros expertos te aconsejarán sobre cuál es la mejor solución de Email Marketing para tu negocio.
SÍGUENOS EN
© Copyright 2024 Acrelia News | Términos de uso | Política de cookies | Aviso legal | Política de privacidad
