KOSTENLOSER A/B-TEST-RECHNER
A/B-Test Rechner: Auswerten und Signifikanz berechnen
Deine neue Landingpage erzielt mehr Anfragen – aber wie belastbar ist der Unterschied? Vergleiche die Conversion-Raten zweier Testvarianten und prüfe, ob der beobachtete Unterschied statistisch auffällig ist. Kostenlos, ohne Anmeldung und mit verständlicher Einordnung für Landingpages und Onlineshops.
ZWEI VARIANTEN. KLARER VERGLEICH
Vergleiche die Ergebnisse deines A/B-Tests
Trage für jede Variante die getesteten Personen und die Personen mit Conversion ein. Der Rechner zeigt dir beide Conversion-Raten, die absolute und relative Veränderung sowie – bei ausreichender Datenbasis – den zweiseitigen p-Wert. Nutze tatsächlich erhobene Daten aus einem abgeschlossenen, vorab geplanten Test.
Was zeigt dir der A/B-Test-Rechner?
Du hast zwei Landingpage-Varianten getestet und möchtest die Ergebnisse einordnen? Der Rechner vergleicht den Anteil der Personen, die dein festgelegtes Ziel erreicht haben. Das kann zum Beispiel eine abgesendete Anfrage oder ein Kauf sein. Entscheidend ist, dass jede Person nur einmal zählt und genau einer Variante zugeordnet ist. Du erhältst beide Conversion-Raten, die Differenz in Prozentpunkten und die relative Veränderung gegenüber Variante A. Bei ausreichenden Zahlen ergänzt ein statistischer Test die Auswertung. Für reine Raten und Ziel-Szenarien kannst du den Conversion-Rate-Rechner nutzen; dieses Tool ist für den Vergleich tatsächlich erhobener Testdaten gedacht.
Welche Daten brauchst du für die Auswertung?
Du brauchst je Variante zwei Zahlen: die Anzahl getesteter Personen und die Anzahl der Personen mit Conversion. Verwende für beide Gruppen denselben Messzeitraum, dasselbe Conversion-Ziel und dieselben Zählregeln. Die Gruppen müssen unabhängig und zufällig zugeteilt sein. Dieselbe Person darf nicht in beiden Gruppen erscheinen. Zähle auch bei mehreren Anfragen oder Bestellungen nur einen Erfolg je Person. Sitzungen, Seitenaufrufe und die Gesamtzahl der Bestellungen sind deshalb nicht automatisch die passenden Eingaben. Prüfe die Zählweise deines Testsystems, bevor du Werte übernimmst.
So wertest du deinen A/B-Test aus
Ordne deine Ausgangsvariante A und deine Vergleichsvariante B zu. Trage alle vier Zahlen ein und klicke auf „Auswerten“. Vergleiche zuerst die Conversion-Raten sowie die absolute und relative Veränderung. Lies anschließend die statistische Einordnung und die Grenzen des Verfahrens. Mit „Beispiel laden“ lernst du den Rechner anhand fiktiver Daten kennen. „Ergebnis kopieren“ übernimmt Eingaben, Ergebnisse, Verfahren und Einschränkungen als Text. Wenn du Zahlen änderst, wird die bisherige Auswertung entfernt, bis du erneut auswertest. „Zurücksetzen“ leert sämtliche Eingaben und Ergebnisse.
Wie werden Unterschied und Signifikanz berechnet?
Die Conversion-Rate ist die Anzahl der Personen mit Conversion geteilt durch die Anzahl getesteter Personen. Die absolute Differenz ist die Rate von B minus die Rate von A, angegeben in Prozentpunkten. Die relative Veränderung setzt diese Differenz ins Verhältnis zur Rate von A. Im fiktiven Beispiel erreichen bei A 300 von 10.000 Personen das Ziel, bei B 360 von 10.000. Das ergibt 3,00 % gegenüber 3,60 %, also +0,60 Prozentpunkte beziehungsweise +20,00 % relativ. Der zweiseitige Zwei-Anteile-z-Test mit gepoolter Varianz und ohne Kontinuitätskorrektur ergibt ungefähr p = 0,01754832. Damit ist der Unterschied unter den Modellvoraussetzungen auf dem festgelegten 5-%-Niveau statistisch auffällig. Die Berechnung nutzt ungerundete Werte. Eine Prozentpunkt-Differenz ist nicht dasselbe wie eine relative Veränderung in Prozent.
Wie interpretierst du das Ergebnis richtig?
Ein p-Wert unter 0,05 gilt in diesem Rechner als statistisch auffällig. Er sagt weder, mit welcher Wahrscheinlichkeit B gewinnt, noch, ob sich eine Umstellung wirtschaftlich lohnt. Ein höherer p-Wert beweist keine Gleichwertigkeit der Varianten. Für die Näherung verlangt dieser Rechner je Gruppe mindestens zehn Personen mit und zehn ohne Conversion; bei kleineren Zahlen bleiben nur die beschreibenden Kennzahlen sichtbar. Der Vergleich setzt eine vorab geplante Auswertung voraus. Wiederholtes Nachsehen mit Abbruch beim ersten günstigen Ergebnis sowie mehrere getestete Varianten oder Ziele sind nicht abgedeckt. Es gibt keine universelle Mindestlaufzeit, die jeden Test zuverlässig macht. Der Rechner erkennt keine Fehler bei Randomisierung, Tracking oder Auswahl der Stichprobe. Beurteile deshalb neben der statistischen Einordnung auch Datenqualität, Größenordnung des Unterschieds, Leadqualität, Kosten und mögliche Auswirkungen auf dein Geschäft.
VOM TESTERGEBNIS ZUR VERBESSERUNG
Entwickelt Landingpages mit einem gemeinsamen Blick fürs Wesentliche
Häufige Fragen zum A/B-Test-Rechner
Welche Zahlen gehören in den Rechner? Was bedeutet ein statistisch auffälliger Unterschied – und wann reicht die Datenbasis nicht aus? Hier findest du Antworten zur Auswertung und zum richtigen Umgang mit deinen Ergebnissen.
Ist der A/B-Test-Rechner kostenlos und ohne Anmeldung nutzbar?
Ja. Du kannst den Rechner kostenlos und ohne Anmeldung nutzen. Ein Benutzerkonto oder eine E-Mail-Adresse sind nicht erforderlich. Trage deine Testdaten ein oder lerne die Auswertung über „Beispiel laden“ kennen. Das Beispiel verwendet fiktive Daten und ist kein Kundenergebnis.
Was bedeutet der p-Wert bei einem A/B-Test?
Unter der Annahme gleicher zugrunde liegender Conversion-Raten beschreibt der p-Wert, wie wahrscheinlich ein mindestens ebenso extremer Unterschied der Teststatistik wäre. Der Rechner betrachtet beide Richtungen und verwendet ein festes Signifikanzniveau von 5 %. Ein p-Wert unter 0,05 gilt hier als statistisch auffällig. Er ist weder die Wahrscheinlichkeit, dass B gewinnt, noch die Wahrscheinlichkeit, dass die Annahme gleicher Raten stimmt. Ein p-Wert ab 0,05 beweist keine Gleichwertigkeit.
Darf ich den Test beenden, sobald ein signifikanter Unterschied erscheint?
Diese einfache Auswertung ist nicht dafür ausgelegt, wiederholt nachzusehen und beim ersten günstigen Ergebnis abzubrechen. Lege die Auswertung und die Kriterien für das Testende vorab fest. Mehrere Varianten oder Conversion-Ziele brauchen ebenfalls eine passende statistische Planung. Eine pauschale Zahl an Testtagen reicht dafür nicht aus. Der Rechner empfiehlt deshalb keinen automatischen Testabbruch und erklärt keine Variante zum sicheren Gewinner.
Welche Zahlen muss ich eingeben?
Trage für A und B jeweils die getesteten Personen und die Personen mit Conversion ein. Jede Person zählt einmal und darf nur einer Gruppe angehören. Auch mehrere Bestellungen oder Anfragen derselben Person zählen nur als ein Erfolg. Beide Gruppen brauchen dasselbe Conversion-Ziel, denselben Messzeitraum und eine zufällige Zuteilung. Nutze nicht ungeprüft Sitzungen oder die Gesamtzahl aller Conversion-Ereignisse.
Warum zeigt der Rechner manchmal keinen p-Wert an?
Für die verwendete Näherung verlangt dieser Rechner in jeder Gruppe mindestens zehn Personen mit und zehn ohne Conversion. Wird diese Regel nicht erfüllt, zeigt er die Conversion-Raten und Unterschiede, aber keinen p-Wert und keine Signifikanzentscheidung. Das bedeutet nicht, dass dein Test grundsätzlich wertlos oder statistisch nicht auswertbar ist. Andere Verfahren können geeignet sein; dieser Rechner wechselt die Methode jedoch nicht automatisch.
Werden meine Eingaben gespeichert und kann ich das Ergebnis kopieren?
Die Berechnung erfolgt lokal in deinem Browser. Der Rechner speichert deine Eingaben nicht dauerhaft und sendet sie nicht an einen Server. Über „Ergebnis kopieren“ kannst du Eingaben, Ergebnisse und methodische Hinweise selbst sichern. Falls das automatische Kopieren nicht funktioniert, erscheint auswählbarer Text zum manuellen Kopieren. Für andere Dienste auf der Website gelten die Informationen in unserer Datenschutzerklärung.
Mehr Wissen für bessere Landingpages und Onlineshops
Vertiefe die Themen hinter deinen Testergebnissen: mit Praxiswissen zu Landingpages, Nutzerführung und Conversion-Optimierung für deinen Marketingalltag.
