Définition et contexte.
Les A/B tests peuvent être utilisés pour tester la performance d'un contenu email sur un échantillon de votre population. Vous avez plusieurs possibilités : tester l'objet du design, les images, les textes ou même le comportement de votre population, que ce soit le nombre de clics ou le chiffre d'affaires total de la campagne.
Vous pouvez choisir d'envoyer un seul message à un petit pourcentage de votre base de données, ou de tester plusieurs designs à la fois, simultanément.
Vous pouvez sélectionner manuellement le message le plus performant ou envoyer automatiquement le meilleur message en fonction des critères de votre choix.
Comment faire – Les étapes
Création d'une campagne A/B test
Pour créer un A/B test, créez une campagne email manuelle classique et choisissez votre population initiale.
Si Campaigns est activé sur votre univers, vous retrouverez les A/B tests dans les campagnes Spécfiques uniquement (depuis Campaigns > Spécifiques > nouvelle campagne).
Vous allez cibler une partie de la population dans l’A/B test, et cibler les autres destinataires avec le meilleur design.
Lorsque la population est calculée, ajoutez la première séquence.
Une fois votre population calculée, ajoutez la première séquence et sélectionnez A/B test.
Configuration de l’A/B test
Volumes
L'onglet volumes vous permet de sélectionner le nombre de branches pour votre test, une action (un message) par branche.
Si vous souhaitez tester 3 messages, cliquez sur l'icône 3 branches. Si vous souhaitez tester plus de 6 messages, vous pouvez définir un numéro personnalisé dans le champ de saisie.
Vous pouvez également sélectionner le nombre de destinataires à qui les tests seront envoyés.
Les destinataires des messages échantillons sont choisis au hasard dans la population initiale.
Paramètres d’un A/B test
Dans l'onglet Paramètres, vous pouvez choisir le mode de validation. Vous pouvez soit prendre la décision vous-même (sélection manuelle), soit définir les critères, la date et l'heure pour la sélection automatique et l'envoi du message final.
Critères de sélection automatique
Splio peut sélectionner le message le plus performant pour vous en utilisant l'un des critères suivants :
- Meilleur taux d'ouverture (ouvreurs uniques)
- Meilleur taux de clic (cliqueurs uniques)
- Plus grand nombre d'acheteurs
- Chiffre d'affaires total le plus élevé
Au moment de l'envoi, Splio analysera toutes les statistiques des messages utilisés dans le test et sélectionnera le message qui a le mieux fonctionné selon les critères choisis.
S'il y a égalité sur les critères sélectionnés, Splio vous enverra un email et vous demandera de saisir manuellement votre choix.
Que se passe-t-il si vous souhaitez arrêter l'envoi du meilleur design ?
Vous avez sélectionné l'option d'envoi automatique du design gagnant à la fin de l'AB test, mais pour une raison quelconque, vous souhaitez arrêter cette action et ne pas l'envoyer. Il est tout à fait possible de le faire en modifiant la campagne et en revenant à une sélection manuelle du gagnant comme indiqué ci-dessous:
Selectionnez "sélection manuelle du design design" :
Autres paramètres
Les autres onglets contiennent les mêmes paramètres que pour les campagnes standard, comme la vitesse d’envoi.
Ces paramètres seront appliqués à toutes les actions de l’A/B test.
Configuration des messages (actions)
Une fois que vous avez validé les paramètres de l’A/B test, y compris le nombre de branches, sélectionnez tous les designs que vous souhaitez tester.
Vous pouvez ensuite sauvegarder le scénario, consulter le résumé de la campagne et lancer le test A/B.
Comparaison des résultats
Après l'envoi du test, vous pouvez comparer les résultats et évaluer les performances de tous les messages.
Allez dans la liste des campagnes dans Scenario, ouvrez votre campagne A/B test (reconnaissable à son nombre de branches et son nom), puis cliquez sur « Comparer l’ A/B test».
Ici, vous pouvez comparer toutes les actions du test, le résumé du ciblage, ainsi que les statistiques globales, qui sont présentées sous forme de tableau comparatif de toutes les statistiques des messages testés.
Les valeurs minimales et maximales sont mises en évidence pour chaque indicateur. Vous pouvez faire passer l'affichage des valeurs absolues aux taux en surbrillance.
Choix du message
Si vous avez choisi la validation automatique de l’A/B test, votre message est sélectionné et envoyé automatiquement à l'heure et à la date prévues. Une fois le message final envoyé, il est disponible dans la liste des campagnes.
Si vous devez choisir le message final manuellement, allez dans la liste des campagnes, puis ouvrez et modifiez votre campagne.
Ouvrez l'éditeur de scénarios, et cliquez sur « Choisir l'action finale ». De là, vous pourrez comparer les statistiques des messages testés, sélectionner le message le plus performant et sélectionner la date et l'heure pour envoyer le message aux autres destinataires.
Après envoi complet de la campagne A/B Test, les deux designs utilisés seront automatiquement dupliqués et de nouveau disponibles dans le module Designer.
Quand - Nos conseils pour bien planifier votre campagne
Testez une chose à la fois
Afin de réussir votre campagne A/B test, vous ne devez tester qu'une seule chose à la fois afin de pouvoir analyser vos résultats : le sujet, le pre-header, les deux, ou encore bien le contenu du design. Il est important d'isoler la zone testée pour pouvoir identifier ce qui a donné des résultats par la suite.
Mesurer
Assurez-vous que vous avez une référence pour votre analyse. Si vous disposez de statistiques existantes, vous pourrez les comparer à votre test par la suite.
Tester simultanément et en continu
Relevez le défi avec de nouveaux tests : bien que vous deviez vous concentrer sur une chose à la fois, vous pouvez toujours exécuter plusieurs campagnes de tests A / B en parallèle. Par exemple, vous pouvez tester la durée, l’urgence, vous pouvez mentionner une promotion ou utiliser le nom du destinataire.
Horaire
Le timing est clé. Assurez-vous de tester différents jours et heures de la journée : les e-mails n'obtiennent pas les mêmes performances en fonction du moment où vous les envoyez.
Ayez un objectif clair en tête
Vous souhaitez augmenter le taux d'ouverture ? Concentrez-vous sur l'objet et les pre-headers.
Vous souhaitez augmenter vos téléchargements ou taux de clics ? Concentrez-vous sur votre contenu.
L'objet de l'email
- ordre des mots (essayez d'inverser l'ordre)
- ton (neutre, amical, provocateur)
- longueur (essayez plus court, essayez plus long)
- personnalisation (essayez d'inclure le prénom)
Pre-header
Essayez d'introduire des pre-header pour susciter la curiosité du client. Plus le texte du pre-header est lié à l'objet, plus il a d'impact.
Contenu
C’est principalement une question visuelle : réorganisez le positionnement du catalogue de produits pour obtenir un impact différent et augmenter le taux de clics.