Einen A/B-Test für die Gratisversand-Leiste in Shopify durchführen

Was Sie testen können

Ein A/B-Test vergleicht Platzierungen Ihres Fortschrittsbalkens mit echtem Traffic. Jede Version ist eine Platzierung, die Sie unter Theme-Integration bereits eingerichtet haben, bearbeitet mit dem gewohnten Platzierungs-Editor. Zum Beispiel:

• ein Banner oben auf der Seite gegen einen Balken im Warenkorb-Drawer;
• dieselbe Platzierung mit zwei Designs: Duplizieren Sie die Platzierung und wechseln Sie ihr Design;
• Ihr Balken gegen gar keinen Balken, mit einer Holdout-Gruppe.

Ein Besucher behält dieselbe Version von Seite zu Seite, und von Gerät zu Gerät, wenn er in seinem Kundenkonto angemeldet ist. Die Zuteilung erfolgt im Browser, aus der bereits geladenen Konfiguration: Tests verlangsamen Ihren Shop nicht.

Wer es nutzen kann

A/B-Tests gehören zum Plan Optimize. Der Menüpunkt A/B-Tests (Beta) ist in jedem Plan sichtbar; ohne Optimize stellt die Seite die Funktion vor und verweist auf die Pläne. Siehe Abonnement und die Preisseite.

Einen Test anlegen

1. Öffnen Sie A/B-Tests (Beta) und klicken Sie auf Test erstellen.
2. Kontroll-Integration: Wählen Sie die Platzierung, die die Kontrollgruppe (A) sieht.
3. Varianten: Fügen Sie die anderen Platzierungen zum Vergleich hinzu. Klicken Sie auf Holdout hinzufügen (kein Balken), um den Balken gegen keinen Balken zu messen. Diese Gruppe verliert, was der Balken ihr gebracht hätte: Halten Sie sie klein und den Test kurz.
4. Varianten bearbeiten: Passen Sie jede Platzierung bei Bedarf mit Platzierung bearbeiten an.
5. Test konfigurieren: Geben Sie den Testname, das Startdatum und das Enddatum, die Primäre Metrik (Umsatz pro Besucher, Conversion-Rate, Durchschnittlicher Bestellwert oder Warenkorb-Hinzufügerate) und die Traffic-Aufteilung ein, die zusammen 100 % ergeben muss.
6. Klicken Sie auf Als Entwurf speichern oder Test starten.

Eine Platzierung kann im selben Zeitraum nur in einem aktiven Test sein. Ist sie schon belegt, wählen Sie eine andere oder planen Sie den Test für ein anderes Zeitfenster.

Ein Test ist Entwurf, Geplant, Läuft, Pausiert oder Abgeschlossen. Auf der Testseite können Sie ihn Starten, Pausieren, Abschließen oder Löschen.

Die Ergebnisse lesen

Der Tab Ergebnisse zeigt eine Zeile pro Variante: Besucher, In den Warenkorb, Umsatz, Umsatz / Besucher, Conversion, Uplift / Besucher, Signifikanz und Zeit bis zum Ziel.

• Der Umsatz pro Besucher ist der fairste Vergleich, wenn die Varianten ungleich viel Traffic bekommen.
• Mit Holdout wird der Uplift gegen die Gruppe ohne Balken gemessen, ohne Holdout gegen die Kontrolle.
• Mehr Daten nötig bedeutet, dass es für ein Fazit zu früh ist. Warten Sie, statt einen Abstand zu lesen, der Zufall sein kann.
• Eine Sample-Ratio-Mismatch-Warnung zeigt, dass die beobachtete Aufteilung von der eingestellten abweicht, oft wegen privater Browserfenster. Lesen Sie die Ergebnisse dann mit Vorsicht.

Die Karte Bestellungen pro Variante zählt die vollständigen Bestellungen der Besucher jeder Variante, Holdout inklusive: Bestellungen, Durchschnittlicher Bestellwert, Ziel erreicht und den Bestellwert im Vergleich zu Holdout oder Kontrolle. Sie bleibt leer, solange der Test jung ist oder die App Ihre Bestellungen nicht lesen kann.

Eine bestimmte Version per Link zeigen

Unter Variante per Link erzwingen liefert Link kopieren einen Link pro Variante. Nutzen Sie ihn, um eine Version selbst zu prüfen, oder in einer E-Mail-Kampagne oder einer Anzeige. Wer ihn öffnet, sieht diese Version und bleibt dabei. Diese Besuche werden getrennt gezählt und verfälschen den Vergleich nicht.

Nach dem Test

Ist ein Test pausiert oder abgeschlossen, wird der Balken nicht mehr auf die Varianten verteilt: Alle Platzierungen des Tests erscheinen gleichzeitig. Deaktivieren Sie die unterlegene Platzierung unter Theme-Integration, um nur die Gewinnerin zu behalten. Zeigt Ihr Shop plötzlich zwei Balken, prüfen Sie zuerst Ihre Tests. Siehe Theme-Platzierung.

Die Karte Laufende A/B-Tests auf der Startseite der App listet Ihre aktiven Tests.