Faire un test A/B de sa barre de livraison offerte sur Shopify
Répartissez votre trafic entre deux emplacements de la barre, ou face à un groupe sans barre, et comparez revenu par visiteur et commandes. L’A/B testing demande le plan Optimize.
Ce que vous pouvez tester
Un test A/B compare des emplacements de votre barre de progression sur du trafic réel. Chaque version est un emplacement déjà posé dans Intégration au thème, modifié avec l’éditeur d’emplacement habituel. Par exemple :
- un bandeau en haut de page face à une barre dans le tiroir panier ;
- le même emplacement avec deux designs : dupliquez l’emplacement, puis changez son design ;
- votre barre face à aucune barre, avec un groupe témoin (holdout).
Un visiteur garde la même version d’une page à l’autre, et d’un appareil à l’autre s’il est connecté à son compte client. Le tirage se fait dans le navigateur, à partir de la configuration déjà chargée : les tests ne ralentissent pas votre boutique.
Qui peut l’utiliser
L’A/B testing fait partie du plan Optimize. L’entrée de menu Tests A/B (Beta) est visible sur tous les plans ; sans Optimize, la page présente la fonctionnalité et renvoie vers les plans. Voir abonnement et la page tarifs.
Créer un test
- Ouvrez Tests A/B (Beta) et cliquez sur Créer un test.
- Intégration de contrôle : choisissez l’emplacement montré au groupe de contrôle (A).
- Variantes : ajoutez les autres emplacements à comparer. Cliquez sur Ajouter un holdout (aucune barre) pour mesurer la barre face à l’absence de barre. Le groupe témoin perd ce que la barre lui aurait rapporté : gardez-le petit et le test court.
- Éditer les variantes : ajustez chaque emplacement avec Éditer l’emplacement si besoin.
- Configurer le test : saisissez le Nom du test, la Date de début et la Date de fin, la Métrique principale (Revenu par visiteur, Taux de conversion, Panier moyen ou Taux d’ajout au panier) et la Répartition du trafic, qui doit totaliser 100 %.
- Cliquez sur Enregistrer en brouillon ou Lancer le test.
Un emplacement ne peut faire partie que d’un seul test actif sur une même période. S’il est déjà pris, choisissez-en un autre ou planifiez le test sur une autre fenêtre.
Un test est Brouillon, Planifié, En cours, En pause ou Terminé. Depuis la page du test, vous pouvez le Démarrer, le Mettre en pause, le Terminer ou le Supprimer.
Lire les résultats
L’onglet Résultats affiche une ligne par variante : Visiteurs, Ajouts au panier, Revenu, Revenu / visiteur, Conversion, Uplift / visiteur, Significativité et Temps jusqu’au palier.
- Le revenu par visiteur est la comparaison la plus juste quand les variantes reçoivent un trafic inégal.
- Avec un holdout, l’uplift se mesure face au groupe sans barre. Sans holdout, face au contrôle.
- Données insuffisantes signifie qu’il est trop tôt pour conclure. Attendez plutôt que de lire un écart qui peut venir du hasard.
- Un avertissement de déséquilibre de répartition signale que la répartition observée s’écarte de celle demandée, souvent à cause de la navigation privée. Lisez alors les résultats avec prudence.
La carte Commandes par variante compte les commandes complètes passées par les visiteurs de chaque variante, holdout compris : Commandes, Panier moyen, Palier atteint et le panier moyen comparé au témoin ou au contrôle. Elle reste vide tant que le test est jeune, ou si l’app ne peut pas lire vos commandes.
Montrer une version précise par lien
Sous Forcer une variante par lien, Copier le lien donne un lien par variante. Servez-vous-en pour vérifier une version vous-même, ou dans une campagne email ou une publicité. La personne qui l’ouvre voit cette version et la garde. Ces visites sont comptées à part pour ne pas fausser la comparaison.
Après le test
Quand un test est en pause ou terminé, la barre n’est plus répartie entre les variantes : tous les emplacements du test s’affichent en même temps. Désactivez l’emplacement perdant dans Intégration au thème pour ne garder que le gagnant. Si votre boutique affiche soudain deux barres, vérifiez d’abord vos tests. Voir emplacement dans le thème.
La page d’accueil de l’app liste vos Tests A/B en cours.
Il manque quelque chose ? Écrivez à [email protected], ou essayez d’abord dans la démo.