Faire un test A/B de sa barre de livraison offerte sur Shopify

Ce que vous pouvez tester

Un test A/B compare des placements de votre barre de progression sur du trafic réel. Chaque version est un placement déjà posé dans Intégration au thème, modifié avec l’éditeur de placement habituel. Par exemple :

• un bandeau en haut de page face à une barre dans le tiroir panier ;
• le même placement avec deux designs : dupliquez le placement, puis changez son design ;
• votre barre face à aucune barre, avec un groupe témoin (holdout).

Un visiteur garde la même version d’une page à l’autre, et d’un appareil à l’autre s’il est connecté à son compte client. Le tirage se fait dans le navigateur, à partir de la configuration déjà chargée : les tests ne ralentissent pas votre boutique.

Qui peut l’utiliser

L’A/B testing fait partie du plan Optimize. L’entrée de menu Tests A/B (Beta) est visible sur tous les plans ; sans Optimize, la page présente la fonctionnalité et renvoie vers les plans. Voir abonnement et la page tarifs.

Créer un test

1. Ouvrez Tests A/B (Beta) et cliquez sur Créer un test.
2. Intégration de contrôle : choisissez le placement montré au groupe de contrôle (A).
3. Variantes : ajoutez les autres placements à comparer. Cliquez sur Ajouter un holdout (aucune barre) pour mesurer la barre face à l’absence de barre. Le groupe témoin perd ce que la barre lui aurait rapporté : gardez-le petit et le test court.
4. Éditer les variantes : ajustez chaque placement avec Éditer le placement si besoin.
5. Configurer le test : saisissez le Nom du test, la Date de début et la Date de fin, la Métrique principale (Revenu par visiteur, Taux de conversion, Panier moyen ou Taux d’ajout au panier) et la Répartition du trafic, qui doit totaliser 100 %.
6. Cliquez sur Enregistrer en brouillon ou Lancer le test.

Un placement ne peut faire partie que d’un seul test actif sur une même période. S’il est déjà pris, choisissez-en un autre ou planifiez le test sur une autre fenêtre.

Un test est Brouillon, Planifié, En cours, En pause ou Terminé. Depuis la page du test, vous pouvez le Démarrer, le Mettre en pause, le Terminer ou le Supprimer.

Lire les résultats

L’onglet Résultats affiche une ligne par variante : Visiteurs, Ajouts au panier, Revenu, Revenu / visiteur, Conversion, Uplift / visiteur, Significativité et Temps jusqu’au palier.

• Le revenu par visiteur est la comparaison la plus juste quand les variantes reçoivent un trafic inégal.
• Avec un holdout, l’uplift se mesure face au groupe sans barre. Sans holdout, face au contrôle.
• Données insuffisantes signifie qu’il est trop tôt pour conclure. Attendez plutôt que de lire un écart qui peut venir du hasard.
• Un avertissement de déséquilibre de répartition signale que la répartition observée s’écarte de celle demandée, souvent à cause de la navigation privée. Lisez alors les résultats avec prudence.

La carte Commandes par variante compte les commandes complètes passées par les visiteurs de chaque variante, holdout compris : Commandes, Panier moyen, Palier atteint et le panier moyen comparé au témoin ou au contrôle. Elle reste vide tant que le test est jeune, ou si l’app ne peut pas lire vos commandes.

Montrer une version précise par lien

Sous Forcer une variante par lien, Copier le lien donne un lien par variante. Servez-vous-en pour vérifier une version vous-même, ou dans une campagne email ou une publicité. La personne qui l’ouvre voit cette version et la garde. Ces visites sont comptées à part pour ne pas fausser la comparaison.

Les navigateurs et les comptes clients exclus dans Réglages > Trafic interne ne comptent jamais dans un test (voir statistiques). Pour vérifier que votre propre visite et votre commande sont bien enregistrées, cochez Compter les visites et commandes de mon équipe dans ce test sous les liens, puis décochez avant de lire les résultats.

Après le test

Quand un test est en pause ou terminé, la barre n’est plus répartie entre les variantes : tous les placements du test s’affichent en même temps. Désactivez le placement perdant dans Intégration au thème pour ne garder que le gagnant. Si votre boutique affiche soudain deux barres, vérifiez d’abord vos tests. Voir placement dans le thème.

La page d’accueil de l’app liste vos Tests A/B en cours.