LEITFADEN
A/B-Tests bei kleinen Besucherzahlen
Varianten stabil zuordnen, Eigenaufrufe ausschließen und Ergebnisse nicht zu früh überbewerten.
Nur eine klare Veränderung
Wenn Überschrift, Zielgruppe und Angebot gleichzeitig wechseln, bleibt unklar, was ein Ergebnis verursacht hat.
Besucher stabil zuordnen
Dieselbe Person sollte innerhalb eines Tests nicht ständig zwischen Varianten wechseln; Vorschau-Aufrufe gehören nicht in die Auswertung.
Mindestreichweite vorher festlegen
Eine hohe Rate aus zwei Aufrufen ist noch keine belastbare Entscheidung. Reichweite und Zielsignal werden vor dem Start festgelegt.
Häufige Fragen
Gewinnt immer die Variante mit der höheren Rate?
Nein. Bei kleinen Stichproben kann der Unterschied Zufall sein.
Sollte man schlechte Varianten sofort löschen?
Nur bei sachlichen oder technischen Fehlern; sonst bis zur festgelegten Mindestreichweite beobachten.