AB testing

Les tests A/B vous permettent de comparer deux versions d'un élément de votre campagne — ligne d'objet, expéditeur, contenu ou image d'appel à l'action — et d'envoyer automatiquement la version la plus performante au reste de votre liste. Cela retire toute part de devinette dans vos décisions de campagne et vous fournit des données exploitables pour vos envois futurs.

Prérequis

• Vous avez un abonnement Flexmail Pro ou Premium.
• Vous avez une campagne prête dans le flux de création de campagne, à l'étape 3 (la page d'aperçu).
• Pour les tests d'expéditeur : les deux adresses d'expéditeur doivent être validées dans votre compte.
• Pour les tests de contenu : vous avez préparé deux messages différents.

Comment cela fonctionne

Vous créez deux variantes d'un même élément. Flexmail scinde une partie de votre liste de destinataires — le groupe test — en deux moitiés, en envoyant la variante A à l'une et la variante B à l'autre. Après une période d'attente que vous définissez, Flexmail évalue les résultats et envoie automatiquement la variante gagnante au reste de votre liste.

Le gagnant est déterminé par le taux d'ouverture pour les tests de ligne d'objet et d'expéditeur, et par le taux de clic pour les tests de contenu. Les tests d'appel à l'action fonctionnent différemment ; voir ci-dessous.

Si les deux variantes obtiennent des résultats équivalents au terme de la période d'attente, Flexmail désignera par défaut la variante A comme gagnante.

Les quatre types de tests A/B

Test de ligne d'objet

Testez deux lignes d'objet différentes. La variante qui obtient le taux d'ouverture le plus élevé à l'issue de la période de test l'emporte, et la ligne d'objet gagnante est envoyée au reste de votre liste. C'est l'un des tests les plus simples à mettre en place et il peut avoir un impact significatif sur vos taux d'ouverture globaux.

Test d'expéditeur

Testez deux noms ou adresses e-mail d'expéditeur différents. Les deux adresses doivent être validées dans votre compte Flexmail. Le gagnant est déterminé par le taux d'ouverture.

Test de contenu

Testez deux messages entièrement différents. C'est le type de test le plus complet, utile lorsque vous souhaitez comparer différentes approches, mises en page ou offres. Le gagnant est déterminé par le taux de clic.

Test d'appel à l'action

Testez différentes images pour un appel à l'action spécifique de votre message. Contrairement aux autres types de tests, celui-ci est envoyé à l'ensemble de votre liste, et non à un groupe test. Flexmail alterne entre les variantes et désigne un gagnant une fois qu'un nombre défini de clics est atteint. À partir de ce moment, tous les lecteurs voient la version gagnante.

Mettre en place un test de ligne d'objet, d'expéditeur ou de contenu

Depuis la page d'aperçu de la campagne (étape 3 du flux de création), cliquez sur le bouton Test A/B avant de passer aux options d'envoi.

1. Sélectionnez le type de test.
2. Saisissez la deuxième variante. La première variante est ce que vous avez saisi à l'étape 1 de la campagne.
3. Définissez la taille de votre groupe test sous forme de nombre ou de pourcentage de votre liste de contacts.
4. Définissez la période d'attente. À l'issue de ce délai, Flexmail évalue les résultats et envoie la variante gagnante.
5. Cliquez sur Sauvegarder pour confirmer la configuration de votre test.

Consulter vos résultats

Une fois le test terminé, vous trouverez les résultats dans la section Tests A/B de votre rapport de campagne. La variante gagnante est clairement indiquée, ainsi que le taux d'ouverture ou de clic de chaque variante.

Conseils de pro

• Tenez un journal continu de vos résultats de tests A/B sur l'ensemble de vos campagnes. Des tendances se dégagent au fil du temps : votre audience peut systématiquement préférer les lignes d'objet courtes, un langage orienté vers l'action, ou la personnalisation par prénom. Cette connaissance a plus de valeur que n'importe quel guide général de bonnes pratiques.
• Testez un seul élément à la fois. Si vous modifiez à la fois la ligne d'objet et l'expéditeur dans le même test, vous ne saurez pas quel changement a entraîné le résultat.
• Définissez un groupe test suffisamment grand pour obtenir des résultats significatifs : au moins quelques centaines de contacts par variante. Des groupes tests très petits produisent des données peu fiables.
• Une différence de 1 à 2 points de pourcentage entre les variantes relève souvent du hasard. Avant de modifier votre approche sur la base d'un seul test, recherchez la même tendance sur plusieurs campagnes. Un petit avantage constant a plus de valeur qu'un écart ponctuel important.

Erreurs courantes à éviter

• Définir une période d'attente trop courte. Une fenêtre de deux heures peut ne pas tenir compte des contacts qui consultent leurs e-mails plus tard dans la journée. Prévoyez au moins 4 heures, ou la nuit entière pour les audiences B2B.
• Considérer un résultat de test comme significatif alors que l'écart est très faible. Si les deux variantes ont obtenu des résultats à 1 ou 2 points de pourcentage l'une de l'autre, la différence peut ne pas être statistiquement significative. Recherchez des tendances cohérentes sur plusieurs tests plutôt que d'agir sur un seul résultat serré.
• Tester trop rarement. Un test par campagne est très bien, mais si vous n'en réalisez que quelques-uns par an, vous ne construisez pas une connaissance utile de votre audience.
• Utiliser un test d'appel à l'action pour une liste avec très peu d'engagement. Ce type de test nécessite un nombre minimal de clics pour désigner un gagnant. Si votre liste est petite ou si votre taux de clic est faible, le test peut durer très longtemps.

Interpréter vos résultats et appliquer ce que vous apprenez

Voir un gagnant n'est que la première étape. Pour faire des tests A/B un atout sur le long terme, considérez chaque résultat comme un point de donnée plutôt que comme une réponse définitive.

Après chaque test, parcourez ces questions :

• La différence était-elle significative ? Un écart de 1 à 2 points de pourcentage est probablement du bruit. Un écart de 5 points ou plus, constant sur des segments d'audience similaires, mérite d'être pris en compte.
• Que cela vous apprend-il sur votre audience ? Une ligne d'objet sous forme de question qui surpasse une affirmation suggère que vos contacts réagissent à la curiosité. Un nom d'expéditeur simple qui surpasse un nom d'entreprise suggère qu'ils valorisent un ton personnel. Notez-le.
• Ce résultat se vérifierait-il sur un autre segment ? Votre liste complète contient des personnes à différents stades de la relation. Envisagez de relancer le même test sur un segment spécifique pour voir si la préférence se confirme.

Tenez un journal simple — un tableur fait très bien l'affaire — où vous notez : le type de test, les variantes, le résultat, l'écart et votre interprétation. Après 5 à 10 tests, vous commencerez à voir des tendances propres à votre audience, bien plus fiables que n'importe quel conseil général d'e-mail marketing.

Étapes suivantes

• Lancez votre premier test de ligne d'objet sur votre prochaine campagne. Comparez une ligne d'objet fonctionnelle à une ligne d'objet basée sur la curiosité et observez ce à quoi votre audience réagit.
• Une fois plusieurs tests réalisés, recherchez des tendances dans vos résultats ; consultez « Qu'est-ce qu'une bonne ligne d'objet ? » pour des conseils sur les lignes d'objet.
• Combinez les tests A/B avec la segmentation : testez différentes approches pour différents segments d'audience afin de construire, au fil du temps, des enseignements spécifiques à chaque segment.