Kostenloser Rechner

Stichprobengröße berechnen: Wie lange muss dein A/B-Test laufen?

Aus aktueller Conversion Rate, gewünschtem Mindest-Effekt und deinem Traffic berechnet der Rechner, wie viele Besucher pro Variante nötig sind und wie viele Wochen der Test laufen muss.

Von Chris Dengler · die Formeln, mit denen wir bei Convertlab arbeiten

Aktuelle Conversion Rate%

Welchen Uplift willst du erkennen?

Besucher pro Tag (im Test)

Erweiterte Einstellungen (optional)2 Varianten · 95,0 % · 80 %

Varianten

Signifikanz

Teststärke

Dein Ergebnis erscheint hier

Gib deine Zahlen ein und klicke auf „Jetzt berechnen“.

Warum das wichtig ist

Wer die Laufzeit nicht plant, testet ins Blaue

Die häufigste Ursache für falsche Testergebnisse ist zu wenig Traffic: Der Test wird gestoppt, bevor er überhaupt einen realistischen Effekt messen kann. Das Ergebnis ist dann Zufall, egal wie es aussieht.

Deshalb rechnen wir vor jedem Test, wie viele Besucher nötig sind und wie lange er laufen muss. Ist die Laufzeit zu lang, testen wir mutigere Änderungen oder Seiten mit mehr Traffic, statt Wochen auf ein Ergebnis zu warten, das nie signifikant wird.

Während der Laufzeit bleibt der Blick dynamisch: Traffic verändert sich, und ein starker Effekt erreicht schneller statistische Sicherheit als ein schwacher.

Formel

Stichprobe pro Variante

n = ( z₁₋α/₂ · √(2p̄(1−p̄)) + z₁₋β · √(p₁(1−p₁) + p₂(1−p₂)) )² ÷ (p₂ − p₁)²

p₁ = aktuelle Conversion Rate, p₂ = p₁ × (1 + Mindest-Effekt), α = Signifikanzniveau, 1 − β = Teststärke.

Testdauer

Tage = n × Anzahl Varianten ÷ Besucher pro Tag

Wir runden auf volle Wochen und empfehlen mindestens zwei Wochen Laufzeit.

So nutzt du das Ergebnis

1Wähle den Mindest-Effekt realistisch: Kleine Effekte brauchen sehr viel Traffic.
2Plane die Laufzeit vor dem Start und werte erst danach aus.
3Ist die Laufzeit zu lang, teste größere Änderungen oder Seiten mit mehr Traffic.

Unsicher bei der Einordnung?Wir schauen im Erstgespräch gemeinsam auf deine Zahlen.

FAQ

Häufige Fragen

Wie berechnet man die Stichprobengröße (Stichprobenumfang) für einen A/B-Test?

Du brauchst die aktuelle Conversion Rate, den kleinsten Effekt, den du erkennen willst (Minimum Detectable Effect), das Signifikanzniveau (meist 95 %) und die Teststärke (meist 80 %). Daraus ergibt sich die nötige Anzahl Besucher pro Variante.

Wie lange sollte ein A/B-Test laufen?

So lange, bis die geplante Stichprobe erreicht ist. In der Praxis sind das meist vier bis sechs Wochen, mindestens aber zwei volle Wochen, damit Wochentags-Schwankungen ausgeglichen sind.

Wie viel Traffic braucht ein Shop für A/B-Tests?

Entscheidend sind Conversions, nicht Besucher. Als Richtwert lohnt sich Testing ab etwa 500 bis 1.000 Bestellungen pro Monat.

Was ist der Minimum Detectable Effect (MDE)?

Der kleinste relative Unterschied, den dein Test zuverlässig erkennen soll. Ein MDE von 10 % heißt: Steigt die Conversion Rate von 2,0 % auf 2,2 %, soll der Test das zeigen.

Weitere kostenlose Rechner