Tests A/B
Un test A/B n'a de sens qu'à partir d'un certain volume de visiteurs. En dessous, il ne conclura jamais, et le laisser tourner trois mois pour s'en apercevoir coûte plus cher que de ne pas l'avoir lancé.
Avant tout
Avant de parler de ce qu'on va tester, on calcule si un test est seulement possible chez vous. Il faut croiser votre taux de conversion actuel, l'écart que vous espérez et le délai que vous acceptez. Ce calcul prend dix minutes, et il disqualifie une bonne partie des sites qui nous le demandent.
Quand c'est le cas, on le dit. Vendre un programme de tests à un site qui n'a pas le volume pour les conclure, c'est vendre des rapports mensuels sur des résultats non significatifs.
Quand le volume est là
- 01
Vous décidez sur des preuves, pas sur des avis
La discussion sur la couleur du bouton n'a pas de vainqueur tant que personne n'a de données. Un test la termine en une phrase, et libère la réunion suivante. - 02
Vous convertissez mieux sans payer plus de trafic
Améliorer le taux de conversion agit sur tous les canaux à la fois, y compris ceux que vous payez. C'est le seul levier dont le bénéfice ne s'arrête pas quand vous coupez le budget. - 03
Le site s'améliore en continu
Un test n'est pas un projet mais une habitude. Chaque itération apprend quelque chose sur vos acheteurs, y compris quand elle échoue, et surtout quand elle échoue.
La méthode
- Avant
Une hypothèse, pas une idée
On teste une croyance formulée : « les visiteurs abandonnent ici parce que le prix n'est pas visible ». Sans hypothèse, un résultat positif n'apprend rien de réutilisable. - Avant
Le calcul de faisabilité
Combien de visiteurs et combien de semaines il faut pour détecter l'écart qu'on espère. Ce calcul se fait avant de lancer, et il disqualifie souvent le test. - Pendant
Une seule variable à la fois
Changer le titre, l'image et le bouton ensemble donne un résultat sans explication. On saura que ça marche, jamais pourquoi. - Pendant
On ne regarde pas tous les jours
Arrêter un test dès qu'il passe en positif est la façon la plus courante de se tromper. La durée se décide au départ et se tient. - Après
Les échecs comptent double
Un test perdant vous apprend que votre modèle de l'acheteur est faux. C'est plus précieux qu'une victoire qu'on n'explique pas. - Après
Le journal des tests
Ce qui a été essayé, dans quelles conditions et avec quel résultat. Sans lui, on reteste tous les deux ans les mêmes hypothèses.
Combien de trafic pour faire un test A/B ?
Cela ne dépend pas du trafic seul mais de trois choses : votre taux de conversion actuel, l'ampleur de l'écart que vous espérez détecter, et le temps que vous acceptez d'attendre. Plus le taux est faible et l'écart espéré petit, plus il faut de visiteurs. Le calcul se fait avant de lancer : il évite de laisser tourner pendant des mois un test qui ne conclura jamais.
Que faire quand on n'a pas assez de volume ?
On tranche autrement, et c'est parfaitement valable. L'observation des sessions réelles, les retours qualitatifs et l'analyse du tunnel montrent où les gens bloquent, sans exiger de significativité statistique. C'est moins rigoureux qu'un test, et infiniment plus utile qu'un test qui ne conclura pas.
On peut tester plusieurs éléments en même temps ?
Techniquement oui, mais cela demande beaucoup plus de volume et complique l'interprétation. Sur la plupart des sites, tester une variable à la fois donne des résultats plus lents mais exploitables, là où le test multivarié donne des résultats rapides et ininterprétables.
Le préalable
Un test A/B ne vaut que ce que vaut la mesure qui l'évalue. Si le suivi des conversions est faux, le test tranchera avec assurance entre deux erreurs.
Premier pas
On commence par un appel de 30 minutes. On regarde ensemble ce qui, dans votre acquisition, relève du loyer, et ce qui peut devenir un actif.
- 30 minutes, en visio
- Un premier échange pour cadrer votre projet
- Vos accès restent les vôtres