Tests A/B : découvrir quelle version fonctionne le mieux

Un Test A/B envoie deux versions d'une campagne à une petite partie de votre liste, attend, puis envoie la version qui a le mieux fonctionné à tous les autres. Vous pouvez tester les objets d'e-mail, le contenu d'un e-mail, et les messages SMS ou WhatsApp.

Tester un e-mail

1. Ouvrez Marketing, puis Campagnes, et ouvrez un brouillon (ou appuyez sur Nouvelle campagne).
2. Pour tester l'objet, saisissez-en un second sous Tester un second objet (facultatif).
3. Pour tester le contenu, choisissez l'Éditeur visuel et cochez Tester aussi une seconde version du contenu (test A/B). Deux onglets apparaissent au-dessus de l'éditeur : Version A et Version B. La version B démarre comme une copie ; modifiez ce que vous voulez tester (l'image, les mots, le bouton).
4. Choisissez la Part de la liste utilisée pour le test (de 10 % à 50 %), ce qui rend une version meilleure (ouvertures ou clics), et combien d'heures attendre avant de choisir.
5. Envoyez ou programmez la campagne comme d'habitude.

Vous pouvez tester l'objet et le contenu ensemble : le groupe B reçoit alors à la fois le second objet et le second contenu.

Tester un message SMS ou WhatsApp

1. Ouvrez SMS et WhatsApp et ouvrez un brouillon de campagne.
2. Cochez Tester une seconde version (test A/B) (ou, pour WhatsApp, Tester un second modèle (test A/B)) et rédigez la version B ou choisissez le second modèle.
3. Choisissez la part de la liste, ce qui rend une version meilleure (réponses, ou pour WhatsApp aussi lectures) et la durée d'attente.

Ce qui se passe

1. Le groupe de test est divisé en deux au hasard : une moitié reçoit la version A, l'autre la version B.
2. Tous les autres attendent. La page de la campagne indique quand la meilleure version sera choisie.
3. Après le délai d'attente, la version qui a obtenu le plus d'ouvertures, de clics, de réponses ou de lectures est choisie et envoyée à tous les autres.

Lire le résultat

Le rapport de la campagne présente les deux versions côte à côte, la gagnante, et une indication sur la fiabilité du résultat :

• Très probablement réel (au moins 95 % de certitude) : l'écart est suffisamment grand pour le nombre de personnes.
• Probablement réel (environ 90 % de certitude) : un test plus grand le rendrait certain.
• Trop serré pour trancher : l'écart pourrait facilement être dû au hasard.
• Trop peu de personnes pour conclure : chaque version a besoin d'au moins 30 personnes et de quelques réponses.