So nutzt du: A/B-Test Signifikanzrechner
- Gib die Besucher und Conversions für Version A ein, deine Kontrollgruppe.
- Gib dann dieselben Werte für Version B ein.
- Wähle ein Konfidenzniveau. 95 % ist die übliche Wahl.
- Lies das Ergebnis und prüfe danach den p-Wert und die Spanne der Differenz.
Was statistische Signifikanz bedeutet
Zufällige Schwankungen sorgen dafür, dass zwei identische Seiten selten exakt gleiche Raten zeigen. Ein Signifikanztest fragt, wie wahrscheinlich ein so großer Unterschied wäre, wenn beide Versionen gleich gut performen. Diese Wahrscheinlichkeit ist der p-Wert. Bei 95 % Konfidenz gilt ein Ergebnis als signifikant, wenn der p-Wert unter 0,05 liegt.
So wird es berechnet
Dieses Tool verwendet einen zweiseitigen Zwei-Proportionen-z-Test. Die Formel lautet z = (Rate B − Rate A) ÷ √(p(1 − p)(1/Besucher A + 1/Besucher B)), wobei p die kombinierte Conversion-Rate ist.
Typische Fehler vermeiden
- Brich nicht früh ab. Wer täglich prüft und beim ersten signifikanten Ergebnis stoppt, erzeugt falsche Gewinner.
- Plane deine Stichprobe. Nutze vor dem Start den A/B-Test Stichprobenrechner.
- Laufe über volle Wochen. Besucher unter der Woche und am Wochenende verhalten sich unterschiedlich.
Auch gesucht als: ab test rechner, ab test signifikanz rechner, statistische signifikanz rechner, split test rechner, ab test p-wert, conversion signifikanz.
Passende Tools zu: A/B-Test Signifikanzrechner
- CTR Rechner — Gib Klicks und Impressionen ein, um deine Klickrate zu erhalten, für Anzeigen, E-Mails oder die Search Console.
- ROAS Rechner — Sieh, was jeder Werbe-Euro einbringt.
- UTM-Builder — Füge utm_source, utm_medium, utm_campaign und Co.
- Prozentrechner — Sieben alltägliche Prozentrechnungen auf einer Seite.
Häufige Fragen
Werden meine Eingaben gespeichert oder übertragen?
Nein. Die Berechnung läuft in deinem Browser. Deine letzten Eingaben werden nur auf diesem Gerät gemerkt, damit die Seite dort weitermacht, wo du aufgehört hast.
Welcher p-Wert ist für einen A/B-Test gut?
Unter 0,05 ist der übliche Standard, der zu 95 % Konfidenz passt. Bei folgenschweren Änderungen nimm 0,01.
Bedeutet 95 % Konfidenz, dass B mit 95 % Wahrscheinlichkeit besser ist?
Nicht genau. Es bedeutet, dass bei keinem echten Unterschied ein so extremes Ergebnis weniger als in 5 % der Fälle auftreten würde.
Warum ist mein Ergebnis nicht signifikant?
Meist ist die Stichprobe zu klein für die Größe des Unterschieds. Lass den Test so lange laufen, bis du deine geplante Stichprobengröße erreicht hast.
Kann ich A/B-Test Signifikanzrechner als Web-App installieren und offline nutzen?
Ja. A/B-Test Signifikanzrechner ist eine installierbare Web-App (PWA) – sie wird über Ihren Browser installiert und nicht aus einem App-Store heruntergeladen. Klicken Sie oben auf dieser Seite in Chrome oder Edge (Windows, macOS, Linux, ChromeOS) auf „App installieren“ oder verwenden Sie auf Android-Geräten „Teilen“ → „Zum Startbildschirm hinzufügen“ auf dem iPhone und iPad bzw. „Datei“ → „Zum Dock hinzufügen“ in Safari 17+ auf einem Mac. Die App öffnet sich dann in einem eigenen Fenster mit einem eigenen Symbol, und da sie vollständig in Ihrem Browser ausgeführt wird, funktioniert sie auch offline. Firefox auf dem Desktop kann keine Web-Apps installieren. So funktioniert die Installation.