Introduction
Un A/B Test dans une campagne email consiste à paramétrer plusieurs versions de la campagne et de les diffuser selon une répartition et des critères définis.
Cet article détaille les différents paramètres entrant en compte dans la mise en place d'un A/B Test.
Description
Une campagne avec A/B Test présente au minimum deux versions différentes, et peut comporter jusque 5 versions au maximum. Ces versions différent selon un critère, appelé ici critère de comparaison
Critère de comparaison
L’A/B Test permet de garder les meilleurs résultats entre les envois en fonction d’un seul critère à la fois parmi :
- L’objet de l’email ;
- L’expéditeur de l’email ;
- Le contenu de l’email.
Attention, il n’est pas possible de choisir plusieurs critères de comparaison. Le but étant d’isoler et de s’assurer que le test n’est pas biaisé par plusieurs éléments de différenciation.
Types de configuration
Deux types de configuration sont possibles pour l'envoi d'une campagne avec A/B Test :
-
Sans généralisation : 100% de la cible est répartie à parts égales dans chaque version.
Par exemple, 50 % de l'échantillon reçoivent la version A et 50 % la version B.
-
Avec généralisation : un pourcentage de la cible défini reçoit la version gagnante des tests A/B, selon la métrique choisie.
Par exemple, 5 % de l'échantillon reçoivent la version A et 5 % la version B. Le reste de la cible (90 %) va recevoir la version la plus performante.
Conclusion
Lorsqu'un A/B Test est activé sur une campagne, plusieurs paramétrages sont disponibles et des tests supplémentaires sont nécessaires avant diffusion de la campagne.
Lectures complémentaires
Comment réaliser un A/B Test sans généralisation dans une campagne email ?
Comment réaliser un A/B Test avec généralisation dans une campagne email ?