Nous sommes souvent confrontés à des marchands qui débutent en AB testing et qui ont besoin d’être aiguillés sur les best practices de cette discipline. J’ai donc synthétisé 8 règles d’or qu’il faut avoir en tête pour effectuer de l’AB testing dans les meilleures conditions. Ces règles permettront à chacun de s’autonomiser en confiance sur la discipline et d’avoir quelques éléments de repère pour bien commencer.
#Règle 1 : Analyser avant de tester
Il est utopique de croire que les tests vont donner des résultats uniquement à l’instinct. Un travail préalable d’analyse de vos statistiques est indispensable afin d’identifier : les pages qui ont le plus gros potentiel d’amélioration, les canaux d’acquisition qui ont les indicateurs les plus faibles…
Si vous ne savez pas par quel bout prendre le travail d’analyse, commencez par identifier les types de pages (Fiches produits, page de catégories, homepage, landing SEM etc…) avec le plus fort trafic et le taux de rebond le plus élevé. Cela vous permettra déjà de voir quels sont les messages qui ne sont pas bien perçus par vos internautes. Sur ces mêmes pages, buy viagra online regardez ensuite où sont allés les internautes qui n’ont pas rebondi. Le parcours de ces internautes contient surement des informations à rapatrier sur votre landing page.
#Règle 2 : Ne lancer qu’un test à la fois
Les tests risquent de s’influencer et donc de fausser les résultats. Surtout si les pourcentages de trafic affectés aux tests et aux variations ne sont pas équitables.
#Règle 3 : Adapter le nombre de variations à la volumétrie
S’il y a beaucoup de variations pour peu de trafic le test va durer des semaines avant de donner des résultats probants. Ainsi, plus le trafic est faible, moins il faut produire de variations.
#Règle 4 : Ne tester qu’un élément à la fois
Sinon, il vous sera impossible de déterminer quel élément à le plus d’impact sur la conversion. Ainsi, les modifs du header ont-elles plus d’impacts que les fonctionnalités de la fiche produit etc…
#Règle 5 : Affecter le même volume de trafic tout au long du test
Sinon cela induit une dose de temporalité dans vos statistiques, ce qui biaise les résultats. Ne vous dites pas : nous allons commencer le test avec l’original à 80% puis au bout de 3 jours si la variation ne plombe pas les résultats nous passerons en 50-50. Cela biaise les résultats.
#Règle 6 : Tester les éléments au même moment
C’est tout l’intérêt du test AB afin d’éviter que des éléments externes conjoncturels ne biaisent les résultats. Ce point rejoint le point précédent. Pour voir les choses de manière extrême, il est faux de comparer août à décembre pour un ecommerçant. Il en est de même pour un test, il est faux de comparer lundi (version originale) à mardi (variation).
#Règle 7 : Fixer les objectifs en amont
Cela évite de faire fluctuer les ambitions, d’interpréter les chiffres et d’en ignorer d’autres. Il faut savoir ce que l’on va regarder pour déterminer si le test est un succès ou non. Ex: Taux de rebond, temps passé sur le site, achat, inscription à une newsletter etc…
#Règle 8 : Ne pas tirer de conclusions hâtives
En dessous de 100 conversions par variation ou de 5000 visiteurs testés, il est dur de tirer des conclusions. Garder toujours un œil sur la fiabilité statistique du test.
