Was wir vor dem Start festlegen

Wir formulieren eine konkrete Änderung, bestimmen die Hauptkennzahl und rechnen aus, wie viele Besucher wir dafür voraussichtlich brauchen. Ein Beispiel: Verstehen Kunden den Unterschied zwischen Abo und Einzelkauf besser, wenn die Preise nebeneinanderstehen? Die Bestellung zählt; ein zusätzlicher Klick ist zunächst nur ein Hinweis.

Du bekommst den Testplan, die umgesetzten Varianten, eine Prüfung der Zuteilung und die Auswertung. Beim Ergebnis schauen wir auch auf Stornos oder Warenkorbwert, wenn sie für die Entscheidung wichtig sind.

Wann endet der Test?

Bei einem Test mit fester Stichprobe vereinbaren wir das Ende vorher. Zeigt das Dashboard nach zwei Tagen Grün, ist das kein Grund zum Abbruch. Bleibt das Ergebnis unklar, dokumentieren wir genau das und entscheiden, ob ein weiterer Versuch die Zeit wert ist.

Was lohnt sich bei wenig Traffic?

Ein kaputter Größenfilter braucht keinen A/B-Test. Bei offenen Fragen helfen Kundenbeobachtungen oder ein kurzer Nutzertest oft schneller. Im Rechenbeispiel zur Stichprobe kannst du sehen, was eine Änderung von 2,0 auf 2,4 Prozent für die Laufzeit bedeutet.

Bei SWISSpur stieg die Add-to-Cart-Rate im Test relativ um 44,99 %. Hier siehst du, was wir direkt über dem Kaufbutton geändert haben.