A/B Testing mit Shopify: Split-Tests, die sich lohnen
Ein A/B-Test zeigt, ob eine Änderung im Shop wirklich mehr verkauft. Seit Juni 2026 kann Shopify das mit „Rollouts“ selbst. Dieser Ratgeber erklärt, wie Tests funktionieren, welches Werkzeug wofür passt, wie lange ein Test laufen muss und welche Fehler Sie vermeiden sollten.
Die Kurzantwort
Beim A/B-Testing (auch Split-Test) sieht ein Teil der Besucher die bisherige Version einer Seite, ein anderer Teil eine neue. Nach genug Bestellungen zeigt der Vergleich, welche Version besser verkauft. In Shopify geht das ab dem Tarif Grow direkt im Admin mit Rollouts; für Tests an Liquid-Vorlagen oder für weitere Auswertungen gibt es Apps.
- Ein Test braucht eine klare Hypothese und genug Bestellungen pro Variante.
- Er läuft in vollen Wochen, mindestens zwei.
- Shopify Rollouts: Experimente ab Grow, im Admin unter Märkte.
- Nur die Änderung testen, die Sie wirklich prüfen wollen.
So funktioniert ein A/B-Test
Die Besucher werden zufällig in zwei Gruppen geteilt. Gruppe A sieht die bestehende Version (die Kontrolle), Gruppe B die geänderte (die Variante). Beide Gruppen erleben denselben Zeitraum, dieselben Werbekampagnen und dieselbe Saison. Unterscheiden sie sich am Ende in der Conversion Rate, liegt das mit hoher Wahrscheinlichkeit an der Änderung.
Das ist der entscheidende Vorteil gegenüber einem Vorher-nachher-Vergleich. Wer im November etwas ändert und im Dezember mehr verkauft, weiß nicht, ob es an der Änderung lag oder am Weihnachtsgeschäft.
Begriffe, die Ihnen begegnen:
- Split-Test: anderes Wort für A/B-Test. Manchmal ist damit ein Test gemeint, bei dem zwei ganz unterschiedliche Seiten verglichen werden.
- Multivariater Test: mehrere Elemente gleichzeitig in verschiedenen Kombinationen. Braucht deutlich mehr Besucher.
- Signifikanz: gibt an, wie sicher der gemessene Unterschied kein Zufall ist. Üblich sind 95 %.
- Hypothese: die begründete Annahme, die der Test prüft.
Was ein Test messen soll, legen Sie vorher fest: meist die Conversion Rate, oft auch Umsatz pro Sitzung oder Bestellwert. Wie die Conversion Rate berechnet wird, steht im Ratgeber Conversion Rate im Onlineshop.
A/B-Tests direkt in Shopify mit Rollouts
Seit Juni 2026 bietet Shopify im Admin unter Märkte > Rollouts eigene Werkzeuge, um Änderungen geplant, schrittweise oder als Experiment auszuspielen. Für ein Experiment legt Shopify automatisch eine Kopie des veröffentlichten Themes an, in der Sie die Variante bearbeiten.
| Shopify Rollouts | |
|---|---|
| Tarif | Rollouts ab Basic, Experimente (A/B-Tests) ab Grow |
| Was sich testen lässt | Änderungen am Theme oder ein anderes Theme, Einstellungen von Checkout und Kundenkonto, Inhalte je Markt, Kataloge und Rabatte |
| Aufteilung | Standard 50 zu 50; das Experiment endet spätestens nach 90 Tagen |
| Auswertung Theme | Conversion Rate, Absprungrate, Anteil mit Warenkorb und Anteil mit erreichtem Checkout |
| Auswertung Checkout | Conversion Rate im Checkout |
| Mehrere Tests | Parallel möglich, wenn sie sich gegenseitig ausschließen |
| Nicht möglich | Änderungen an Liquid-Vorlagen, Headless-Shops und eigene Storefronts, Vintage-Themes, eigene Messgrößen |
Gut geeignet ist Rollouts für Tests an Abschnitten und Einstellungen im Theme-Editor, etwa einer anderen Startseite, einer neuen Anordnung auf der Produktseite oder einer geänderten Checkout-Einstellung. Ein Hinweis von Shopify: Wenn Sie über Kataloge oder Rabatte Preise testen, können Google und andere Verkaufskanäle während des Experiments abweichende Preise zeigen.
Rollouts, App oder Testwerkzeug?
| Weg | Stärken | Grenzen |
|---|---|---|
| Shopify Rollouts | Im Admin enthalten, kein zusätzliches Skript, Auswertung in Shopify Analytics | Ab Grow, keine Liquid-Änderungen, feste Messgrößen |
| Test-App aus dem App Store | Je nach App Tests an Vorlagen, Preisen und Versandkosten, eigene Auswertungen | Monatliche Kosten, zusätzliche Skripte, Einbindung ins Cookie-Banner |
| Externes Testwerkzeug | Sehr flexibel, auch für Seiten außerhalb von Shopify | Technischer Aufwand, Skript im Browser kann Ladezeit kosten, Einwilligung nötig |
Für die meisten Shops ist Rollouts der erste Schritt: Es ist schon da und braucht kein zusätzliches Skript. Eine App lohnt sich, wenn Sie Preise in größerem Stil testen, Änderungen an Liquid-Vorlagen prüfen oder Ergebnisse nach eigenen Kriterien auswerten wollen. Worauf Sie bei jeder App achten sollten, zeigt der Ratgeber Shopify Apps.
Ein Test in fünf Schritten
Problem finden
In den Zahlen nachsehen, wo Besucher abspringen: Produktseite, Warenkorb, Checkout.
Hypothese formulieren
„Wenn wir die Versandkosten direkt unter dem Preis zeigen, legen mehr Besucher das Produkt in den Warenkorb, weil sie nicht mit Zusatzkosten rechnen müssen.“
Größe und Laufzeit planen
Vorher ausrechnen, wie viele Besucher und Bestellungen der Test braucht, und eine Laufzeit in vollen Wochen festlegen.
Test laufen lassen
Nicht vorzeitig abbrechen und während des Tests nichts anderes an der Seite ändern.
Auswerten und umsetzen
Gewinnt die Variante, wird sie übernommen. Verliert sie, ist das auch eine Erkenntnis für die nächste Hypothese.
Wie lange ein Split-Test laufen muss
Die häufigste Frage ist zugleich die wichtigste. Ein Test braucht genug Bestellungen in jeder Variante, damit der Unterschied kein Zufall ist. Wie viele das sind, hängt von drei Dingen ab:
- Ihrer aktuellen Conversion Rate: Je niedriger sie ist, desto mehr Besucher braucht der Test.
- Dem Effekt, den Sie erkennen wollen: Ein kleiner Unterschied von wenigen Prozent braucht ein Vielfaches der Besucher, die für einen großen Unterschied nötig sind.
- Der gewünschten Sicherheit: Üblich sind 95 % Signifikanz.
Kostenlose Rechner für die Stichprobengröße finden Sie unter dem Stichwort „A/B Test Sample Size Calculator“. Tragen Sie Ihre Conversion Rate und den gewünschten Mindesteffekt ein; das Ergebnis teilen Sie durch Ihre Besucher pro Woche.
Unabhängig vom Rechner gilt:
- Mindestens zwei volle Wochen. Montags kaufen andere Menschen als sonntags. Erst über ganze Wochen gleichen sich diese Unterschiede aus.
- Keine Aktionswochen. Black Friday, große Rabatte oder eine neue Werbekampagne verändern das Verhalten so stark, dass das Ergebnis nicht auf normale Wochen übertragbar ist.
- Nicht zu früh stoppen. In den ersten Tagen schwanken Ergebnisse stark. Wer beim ersten positiven Wert aufhört, übernimmt oft Zufallsergebnisse.
Hat Ihr Shop zu wenige Bestellungen für einen sauberen Test, ist das kein Grund aufzugeben. Dann helfen bewährte Regeln, Nutzerbeobachtung und ein sorgfältiger Vorher-nachher-Vergleich.
Was sich in Shopify testen lässt
Produktseite
Reihenfolge von Bildern und Text, Versandkosten und Lieferzeit am Kaufbutton, Bewertungen weiter oben, kürzere oder längere Beschreibung.
Kollektionsseite
Anzahl der Produkte pro Reihe, Filter oben oder seitlich, Sortierung nach Beliebtheit oder Neuheit.
Warenkorb
Hinweis auf die Grenze für kostenlosen Versand, Ergänzungsprodukte, Warenkorb als Seitenleiste oder eigene Seite.
Startseite
Hauptbotschaft im ersten Bildschirm, Einstieg über Kategorien oder Bestseller, Platzierung von Kundenstimmen.
Checkout
Reihenfolge der Zahlarten, Express-Checkout, Hinweise zu Rückgabe und Sicherheit.
Preise und Angebote
Bundles, Mengenrabatte, Grenze für kostenlosen Versand. Hier besonders sorgfältig planen, denn Preise wirken auf Marge und andere Kanäle.
Die häufigsten Fehler beim A/B-Testing
- Ohne Hypothese testen. „Mal sehen, ob Grün besser ist als Blau“ liefert selten verwertbare Erkenntnisse. Eine gute Hypothese nennt das Problem, die Änderung und den erwarteten Grund.
- Zu viel auf einmal ändern. Wer Bilder, Text und Button gleichzeitig ändert, weiß am Ende nicht, was gewirkt hat.
- Zu früh entscheiden. Siehe oben: volle Wochen, genug Bestellungen.
- Nur auf die Conversion Rate schauen. Ein Rabatt erhöht die Conversion Rate fast immer, senkt aber die Marge. Prüfen Sie auch Umsatz pro Sitzung und Bestellwert.
- Mobil und Desktop vermischen. Eine Änderung kann auf dem Smartphone helfen und auf dem Desktop schaden. Werten Sie beide getrennt aus.
- Ladezeit vergessen. Externe Testwerkzeuge laden zusätzliche Skripte. Eine langsamere Seite kann den Effekt der Änderung aufheben.
- Einwilligung übersehen. Testwerkzeuge, die eine Kennung im Browser speichern, um Besucher derselben Variante zuzuordnen, müssen in der Regel in das Cookie-Banner eingebunden werden. Die rechtliche Bewertung kommt von Ihrer Datenschutzberatung; wie das Banner in Shopify technisch funktioniert, zeigt der Ratgeber Shopify Cookie-Banner.
- Für Suchmaschinen doppelte Inhalte erzeugen. Bei Tests mit eigenen Adressen gehört auf die Variante ein Verweis (Canonical) auf die Originalseite. Bei Rollouts bleibt die Adresse gleich.
Split-Tests in unseren Projekten
Beim BAHM!SHOP von Jan Bahmann testen wir Änderungen per Split-Test, von der Produktseite bis zum Warenkorb. Umgesetzt wird nur, was nachweislich mehr verkauft. Weitere Shops in unserer Betreuung finden Sie unter Projekte; wie wir bei der Optimierung vorgehen, steht auf der Seite Conversion-Optimierung.
Häufige Fragen zum A/B-Testing
Was ist der Unterschied zwischen A/B-Test und Split-Test?
Meist meinen beide dasselbe: Besucher werden zufällig auf zwei Versionen verteilt. Manche verwenden „Split-Test“ speziell für den Vergleich zweier ganz unterschiedlicher Seiten.
Kann Shopify A/B-Tests ohne App?
Ja. Mit Rollouts bietet Shopify seit Juni 2026 eigene Experimente im Admin, ab dem Tarif Grow. Änderungen an Liquid-Vorlagen lassen sich damit nicht testen.
Wie lange sollte ein A/B-Test laufen?
Mindestens zwei volle Wochen und so lange, bis jede Variante genug Bestellungen hat. Die nötige Größe hängt von Ihrer Conversion Rate und dem Effekt ab, den Sie erkennen wollen.
Ab wie vielen Besuchern lohnt sich A/B-Testing?
Eine feste Grenze gibt es nicht. Ein Stichprobenrechner zeigt, ob Ihr Traffic in einigen Wochen für ein klares Ergebnis reicht. Wenn nicht, sind größere Änderungen mit deutlichem Effekt oder ein sauberer Vorher-nachher-Vergleich sinnvoller.
Schaden A/B-Tests meinem Google-Ranking?
Nicht, wenn sie sauber umgesetzt werden: Suchmaschinen sollen keine versteckten Inhalte sehen, Varianten mit eigener Adresse verweisen per Canonical auf das Original, und der Test endet, sobald das Ergebnis feststeht.
Kann ich mit Rollouts Preise testen?
Über Kataloge und Rabatte lassen sich Preisänderungen in einem Experiment ausspielen. Shopify weist darauf hin, dass Google und andere Kanäle währenddessen abweichende Preise zeigen können. Planen Sie solche Tests daher besonders sorgfältig.
Ihren ersten Test planen
Wir sehen uns Ihren Shop an, sagen Ihnen, welcher Test sich zuerst lohnt, und setzen ihn mit Ihnen um. 15 Minuten, kostenlos und unverbindlich.
