Descripción de conmutadores de rendimiento
Use conmutadores de rendimiento en un programa para comparar la efectividad de las campañas u otras variables como, por ejemplo, temporizadores, dentro del contexto del flujo de un programa. Por ejemplo, puede probar:
- Para campañas de correo electrónico:
- Líneas de asunto, para ver cuál tiene una ratio de aperturas más alta.
- Contenido de mensaje, para ver qué mensaje tiene una ratio de visitas efectivas mejor.
- Contenido de página de llegada, para ver qué página ofrece una ratio de conversiones mejor.
- Tiempos, para ver si obtiene una mejor respuesta total cuando varíe los mensajes entre intervalos.
- Frecuencia de toque, relevancia del mensaje o estrategia global, para ver qué enfoque conduce a la ratio de cancelación de suscripción más baja.
- Para campañas de SMS:
- Ratio de recibidos
- URL corta
- Ratio de conversiones
- Canales (correo electrónico o SMS), para ver qué canal obtiene la mejor respuesta.
Cuando sepa qué elementos generan los mejores resultados, puede utilizar esa información para mejorar el rendimiento de los programas.
Aquí hay un programa de muestra que utiliza un conmutador de rendimiento para probar la efectividad de dos campañas de correo electrónico, que es el modo más común de utilizar un conmutador de rendimiento. Un conmutador de asignación envía a un grupo aleatorio (10%) a cada una de las dos rutas de prueba y envía el 80% restante, el grupo de exclusión, a un Temporizador - transcurrido. Una vez transcurrido el temporizador, el conmutador de rendimiento envía el grupo de exclusión a la ruta que ha producido los mejores resultados.
Aunque puede crear muchas combinaciones válidas de acciones, temporizadores y conmutadores, un conmutador de rendimiento le dará los resultados más claros cuando limite el juego de variables que está probando. Cuantas más variables (campañas, tiempos, etcétera) incluya en cada ruta de prueba, menos probable será que pueda atribuir los resultados a cualquier variable.
Acerca de la selección de la versión ganadora
En función del modo en que se configura un conmutador de rendimiento, el sistema puede utilizar una de las cuatro métricas de campaña para identificar de modo automático la ruta con la campaña que produce los mejores resultados. Alternativamente, puede definir el conmutador para que se detenga mientras evalúa los resultados de ambas rutas antes de seleccionar la que desea.
Cuando defina un conmutador de rendimiento para la selección automática de la versión ganadora, elija una de las siguientes métricas y defínala al mínimo o máximo como criterio para ganar:
- Ratio de aperturas: número de mensajes abiertos
- Ratio de visitas efectivas: número de mensajes que tienen como resultado que el destinatario haga clic en el enlace del mensaje
- Ratio de conversiones: número de mensajes que hacen que el destinatario realice una compra
- Ratio de cancelación de suscripción: número de mensajes que hacen que el destinatario cancele la suscripción
Si define un conmutador de rendimiento como selección manual de la versión ganadora, espere a que se ejecute la prueba, examine los resultados (normalmente mediante paneles de control interactivos de Insight) y posteriormente vuelva al conmutador de rendimiento para designar la ruta ganadora. Este enfoque se adapta mejor a rutas complejas que contienen varias campañas, temporizadores y otras variables. El siguiente ejemplo ilustra un conmutador de rendimiento que es el que mejor se adapta a la selección manual de la versión ganadora.
Sugerencia: la selección automática está diseñada para medir los resultados de una campaña por ruta y funciona mejor con rutas comparables. Por ejemplo, si tiene una campaña en cada ruta, resulta fácil determinar qué campaña consigue los mejores resultados. Sin embargo, si tiene varias campañas y temporizadores en cada ruta, los efectos de las métricas de campaña que está evaluando se diluyen. En este caso, la mejor opción es definir el conmutador de rendimiento para realizar la selección manual de la versión ganadora y analizar el rendimiento agregado de cada ruta usted mismo.
Funcionamiento
Para poder utilizar un conmutador de rendimiento para comparar la efectividad de una campaña en cada ruta, debe dividir al público en grupos de prueba y de exclusión, y determinar la duración de la ejecución de la prueba. También debe definir las rutas que guían al conmutador.
Puede identificar los grupos de prueba y de exclusión utilizando un conmutador de asignación que seleccione los grupos aleatoriamente. También puede colocar un conmutador de datos antes del conmutador de asignación para retirar el grupo de exclusión antes de dividir el público de prueba en dos grupos.
A continuación viene un temporizador para definir la duración de la prueba y mantener el grupo de exclusión en un patrón de retención hasta que se identifique la ruta con los mejores resultados. Puede utilizar un Temporizador - transcurrido para definir la duración de la prueba o un Temporizador - objetivo para finalizar la prueba en una fecha y hora concretas.
Al otro lado del conmutador de rendimiento están las rutas de prueba, normalmente dos de ellas. En teoría, podría usar un conmutador de datos para desviar al grupo de exclusión y un conmutador de asignación para crear tres rutas de prueba. Sin embargo, en la práctica, dos rutas proporcionan una prueba más realista y significativa.
Aunque cada ruta puede contener cualquier número de actividades y eventos, como mejor práctica se debería mantener simple controlando el número de variables que se prueban. Si desea evaluar dos campañas, use los mismos temporizadores en ambas rutas. Del mismo modo, si desea identificar el intervalo más efectivo entre mensajes, mediante selección manual, es una buena idea probar los temporizadores respecto a mensajes similares. Si desea probar exactamente el mismo mensaje exacto con otras variables, haga una copia de la campaña para que pueda obtener dos juegos de métricas.
Con todos los demás elementos en su sitio, ya puede agregar y configurar un conmutador de rendimiento.
Para utilizar un conmutador de rendimiento en un programa
- Arrastre el conmutador de asignación o de datos, el temporizador, los elementos de ruta y cualquier otro elemento necesario inicial al lienzo. Conéctelos según necesite.
- Arrastre un conmutador de rendimiento al lienzo y conéctelo a su temporizador de entrada y a dos rutas de salida.
- Haga doble clic en el conmutador de rendimiento y defina las siguientes opciones:
- Notificaciones por correo electrónico: introduzca una lista de direcciones de correo electrónico a las que desea notificar cuando haya terminado la prueba. Separe las direcciones de correo electrónico con comas.
Con el modo de selección automática, la notificación indica qué campaña ha sido identificada como la ganadora. Con el modo de selección manual, el correo electrónico informa a los destinatarios de que es hora de examinar el rendimiento de las rutas de prueba e identificar a la ganadora. El programa también envía una notificación cuando se ha identificado una versión ganadora para un conmutador de rendimiento en modo manual. - Modo de selección ganadora: elija Automático o Manual.
El modo que elija depende de lo complejas que sean las rutas de prueba y de si una sola métrica en una campaña por ruta ofrecerá información suficiente para que el programa determine la ruta con el mejor rendimiento. Si es así, seleccione Automático; de lo contrario elija Manual. Con el modo de selección manual, puede utilizar Insight para examinar los resultados agregados para cada ruta y determinar por sí mismo la ruta óptima.Nota: asegúrese de elegir el modo de selección Manual si una ruta de prueba contiene una campaña de SMS de Program. Los datos de rendimiento utilizados para la selección automática no están disponibles para las campañas de SMS.
- Métrica y criterio: para el modo de selección automático, elija una de las métricas disponibles (Ratio de aperturas, Ratio de visitas efectivas, Ratio de conversiones o Ratio de cancelaciones de suscripción) y un criterio (máximo o mínimo) para la métrica.
- Nombres de ruta y selección de campaña: agregue una etiqueta única para cada ruta de prueba. Si utiliza el modo de selección automático, seleccione una campaña de cada ruta.
- Notificaciones por correo electrónico: introduzca una lista de direcciones de correo electrónico a las que desea notificar cuando haya terminado la prueba. Separe las direcciones de correo electrónico con comas.
- Indique si la recopilación de datos para el conmutador debería volver a empezar cuando se publique este programa.
Los datos recopilados por el conmutador son la base para identificar la ruta con los mejores resultados. Consulte . - Haga clic en Listo.
Nota: para obtener más información sobre el modo en que los conmutadores de rendimiento se ajustan en los programas, consulte Diseño de programas.
Sugerencias, trucos y notas
- Asegúrese de que el grupo de prueba sea lo suficientemente grande como para que genere resultados significativos. Si el grupo de prueba es demasiado pequeño, la diferencia en rendimiento puede no ser estadísticamente significativa.
- Independientemente del modo de selección, eche un vistazo a los resultados de la prueba para asegurarse de que está midiendo las cosas correctas. Por ejemplo, la siguiente ilustración cómo la ruta con la mejor campaña de rendimiento no es necesariamente la ganadora total.
- El conmutador de rendimiento funciona con públicos creados utilizando un punto de entrada Filtro programado, Activado por el cliente, Desactivado por el cliente o Evento personalizado.
- No puede seleccionar una campaña en más de un conmutador de rendimiento ni más de una vez dentro del mismo conmutador de rendimiento.
- Si el conmutador de rendimiento se define para selección automática y dos o más campañas ofrecen el mismo rendimiento, la ruta indicada primero en las propiedades del conmutador de rendimiento es declarada ganadora.
Gestión de programas publicados con un conmutador de rendimiento
La opción Iniciar en publicación se activa de modo automático cuando se agrega un nuevo conmutador de rendimiento. Cuando se publica el programa, esta opción se desactiva de modo automático. Esto permite que el conmutador recopile datos desde la hora de publicación hasta que se active la opción y se vuelva a publicar el programa. Puede modificar esta opción según necesite editando la definición del conmutador.
Si activa esta opción antes de seleccionar la ruta ganadora en modo de selección manual y después vuelve a publicar el programa, los miembros del público que estén en el conmutador permanecerán allí, esperando que seleccione la ruta ganadora.
Una vez identificada la ruta ganadora, ya sea de modo automático o manual, el comportamiento de la opción Iniciar en publicación cambia:
- Si cambia la definición del conmutador y activa Iniciar en publicación, al volver a publicar el programa se borran todos los datos existentes para el conmutador. Entonces el conmutador utiliza la nueva definición para determinar la ruta ganadora.
- Si cambia la definición del conmutador y no activa Iniciar en publicación, al volver a publicar el programa no se modifica la selección de ganadora existente para ese conmutador.
Si cambia el modo de selección, Program reinicia de modo automático el conmutador de rendimiento. Los miembros del público que estén en el conmutador en ese momento permanecerán allí hasta que se introduzcan nuevos miembros de público en el conmutador y se seleccione una ruta ganadora. En ese momento, todos los miembros del público se envían a la ruta ganadora.
Anulación de publicación de programas con un conmutador de rendimiento
Cuando se anula la publicación de un programa que contiene un conmutador de rendimiento:
- Los miembros del grupo de exclusión del conmutador son retenidos a menos que opte por finalizar todo en el separador Analizar después de anular la publicación del programa. Si lo hace, los miembros del grupo de exclusión del conmutador son eliminados de la tabla de accesos registrados.
- Si se ha seleccionado un ganador, el conmutador mantiene la selección.
- Si el conmutador se define para selección automática y no se ha seleccionado ninguna ganadora, la anulación de la publicación del programa detiene el proceso de selección hasta que se vuelva a publicar el programa y se introduzcan nuevos miembros de público en el conmutador.
Cuando se edita un programa publicado que contiene un conmutador de rendimiento:
- Si no modifica el conmutador de rendimiento, este continúa trabajando tal como se ha publicado.
- Si suprime un conmutador de rendimiento y vuelve a publicar el programa, los miembros del grupo de exclusión del conmutador se eliminan de la tabla de accesos registrados.
- Si agrega una ruta de salida a un conmutador de rendimiento o suprime cualquier ruta de salida excepto la ganadora existente, el conmutador mantiene la selección de ruta ganadora cuando se vuelve a publicar el programa.
- Si suprime la ruta ganadora y vuelve a publicar el programa, el conmutador de rendimiento se restablece para esperar nuevos miembros de público.
Selección manual de una ruta ganadora
Un conmutador de rendimiento se ejecuta (recopila datos) hasta que caduca el temporizador que lo precede. Si se define el conmutador para selección automática, la ruta que contiene la mejor campaña de rendimiento es designada ganadora. Si el conmutador se define para selección manual, Program muestra una advertencia en la página Programas y envía un correo electrónico a las direcciones definidas para el conmutador. Es entonces cuando se debe revisar los resultados de la prueba en Insight e identificar la ruta que haya generado los mejores resultados.
Una vez identificada la ruta ganadora, necesita indicarla en el conmutador de rendimiento.
Para seleccionar la ruta ganadora
- Abra el programa que contiene el conmutador de rendimiento y seleccione Instantánea en el separador Analizar.
- Haga doble clic en el conmutador de rendimiento, seleccione la ruta ganadora y haga clic en Listo.
La ruta que seleccione se resalta y Program envía una notificación de seguimiento a las direcciones de correo electrónico especificadas. Los miembros de público restantes y todo el tráfico futuro que llegue al conmutador de rendimiento se envían a la ruta que seleccione.
Para sustituir una ruta seleccionada
- Abra el programa que contiene el conmutador de rendimiento y seleccione Instantánea en el separador Analizar.
- Haga doble clic en el conmutador de rendimiento, seleccione una nueva ruta ganadora y haga clic en Listo.
- Confirme que desea cambiar la ruta.
Program envía una notificación por correo electrónico anunciando el cambio a la lista de distribución del conmutador de rendimiento. Si selecciona de forma manual una ganadora antes de que se realice una selección automática, la selección automática no sustituirá a la selección manual cuando el temporizador transcurra.