A/B-Tests für Angebote

Vergleichen Sie zwei Versionen eines Angebots, lesen Sie die Ergebnisse und wählen Sie den Gewinner.

6 Min. Lesezeit

Einen Test starten

Öffnen Sie ein aktives Angebot (kein festes Bundle) und klicken Sie auf „A/B-Test“, oder klicken Sie in der Angebotsliste auf „A/B“.
MixMaxer dupliziert es als „<Name> (B)“, einen Entwurf in derselben Gruppe. Ändern Sie in B genau eine Sache: die Rabatthöhe, die Staffeln, den Titel oder das Layout.
Veröffentlichen Sie B. Ab jetzt werden die Besucher zur Hälfte aufgeteilt.

So funktioniert die Aufteilung

Der Onlineshop weist jeden Besucher beim ersten Aufruf zufällig A oder B zu und merkt sich das im Browser, sodass ein Besucher immer dieselbe Variante sieht.
Die Wahl wird in den Warenkorb geschrieben, und die Rabatt-Function wendet nur die Variante an, die der Besucher gesehen hat. POS, Bestellentwürfe und Besucher ohne Warenkorb-Zuordnung erhalten A.
Beide Varianten zählen in der Prioritätsreihenfolge als ein Angebot.
Wird eine Variante pausiert, sehen alle die andere; die Aufteilung wird fortgesetzt, sobald beide wieder aktiv sind.

Die Ergebnisse lesen

Analysen › Experimente listet pro Variante Impressionen, Bestellungen, Conversion, Umsatz, Gewinn und den Wert pro Besucher auf, gezählt seit Teststart. Unter der Tabelle zeigt ein Balken die Wahrscheinlichkeit, dass B A bei der von Ihnen gewählten Kennzahl schlägt. „A wählen“ oder „B wählen“ lässt den Gewinner für alle aktiv und pausiert den Verlierer; „Ohne Gewinner beenden“ trennt die beiden Angebote voneinander.

Die Kennzahl wählen

Conversion: Bestellungen pro Impression. Am besten, wenn beide Varianten dieselben Produkte zu ähnlichen Preisen verkaufen.
Umsatz pro Besucher: Conversion × durchschnittlicher Bestellwert. Verwenden Sie diese Kennzahl, wenn sich die Varianten in Preis oder Bundle-Größe unterscheiden.
Gewinn pro Besucher: Conversion × durchschnittlicher Gewinn pro Bestellung. Die ehrliche Kennzahl, wenn eine Variante einen höheren Rabatt gewährt: Mehr Bestellungen können trotzdem weniger Geld bedeuten. Erfordert „Kosten pro Artikel“ bei Ihren Varianten in Shopify (Produkte › Variante › Kosten pro Artikel).

MixMaxer entscheiden lassen

Legen Sie das Konfidenzniveau fest (95 % ist die übliche Wahl; 90 % entscheidet schneller, 99 % ist strenger), die Mindestanzahl an Bestellungen pro Variante (standardmäßig 30), und aktivieren Sie „Gewinner automatisch anwenden“. Sobald eine neue Bestellung die Wahrscheinlichkeit über das Konfidenzniveau hebt, läuft der Gewinner für alle weiter und der Verlierer wird pausiert, ohne dass sich jemand anmelden muss. Die Wahrscheinlichkeit stammt aus einem bayesschen Modell der Bestellungen pro Impression jeder Variante und ist daher jederzeit gültig: Es gibt keine feste Testdauer, die Sie abwarten müssen.

Kontrollgruppe: Was Angebote wirklich bringen

Einstellungen › Allgemein › Kontrollgruppe (Pro) leitet einen Anteil der Besucher (zum Beispiel 10 %) an allen Angeboten vorbei: kein Widget, keine Warenkorbleiste, keine Badges, kein automatischer Rabatt. Analysen › Kontrollgruppen-Experiment vergleicht den durchschnittlichen Bestellwert dieser Besucher mit dem aller anderen. Anders als der Vergleich „Bundle vs. andere Bestellungen“ ist dies ein echtes Experiment: Saisonalität, Kampagnen und Traffic-Mix wirken auf beide Gruppen gleichermaßen. Geben Sie ihm zwei bis vier Wochen und 30+ Bestellungen pro Gruppe, und schalten Sie die Kontrollgruppe danach wieder aus.

Häufige Probleme

„B wählen“ wird abgelehnt.

B muss veröffentlicht (aktiv) sein, bevor es gewinnen kann. Veröffentlichen Sie B oder wählen Sie A.

Eine Variante hat deutlich weniger Impressionen.

In den ersten Stunden normal; Besucher werden beim ersten Produktaufruf zugewiesen, nicht bei jedem Seitenaufruf. Stark ungleiche Zahlen über mehrere Tage bedeuten, dass eine Variante verborgen ist (pausiert, abgelaufen) oder die Produktseite pro Variante zwischengespeichert wird.

Kann ich drei Varianten testen?

Nein; zwei gleichzeitig. Führen Sie anschließend einen zweiten Test gegen den Gewinner durch.

Der Gewinn zeigt „—“.

Bei den verkauften Varianten sind keine Kosten hinterlegt. Tragen Sie „Kosten pro Artikel“ in Shopify ein (Produkte › Variante › Preisgestaltung). Die Kosten werden beim Eingang einer Bestellung gelesen, frühere Bestellungen bleiben daher ohne Gewinn.

Der automatische Gewinner wurde zu früh / zu spät angewendet.

Erhöhen Sie die Mindestanzahl an Bestellungen oder das Konfidenzniveau für eine strengere Entscheidung; senken Sie sie, um schneller zu entscheiden. Die Entscheidung wird bei jeder Bestellung neu geprüft, nie per Zeitschaltung.

Besucher der Kontrollgruppe haben trotzdem einen Rabatt erhalten.

Rabattcodes und die eigenen automatischen Rabatte von Shopify sind nicht betroffen; nur MixMaxer-Angebote werden zurückgehalten. Außerdem gilt die Kontrollgruppe pro Browser: Dieselbe Person kann auf einem anderen Gerät in der anderen Gruppe sein.

Mehr in Analysen und Berichte

← Alle Artikel · Weiter: Gewinn pro Angebot und die Kontrollgruppe · Kommen Sie nicht weiter? Support kontaktieren