Wie lange muss denn ein Test (A/B – Split Test oder Multivariater Test) für ein Conversion Rate Optimierungsprojekt laufen? Diese Frage haben sich schon viele von Euch gestellt, zumindest kann ich das anhand der Anzahl der Anfragen per Mail der letzten Monate an mich vermuten. Heute bin ich auch eine schöne Seite gestoßen, welche genau diese Frage beantwortet.

Schaust Du hier :-) : http://abtester.com/calculator/

Alles was ihr eintragen müsst ist,…

• die Anzahl der Besucher der Seite je Testvariante (in das Feld “Visitors Treated”)
• die Anzahl der erfolgten Conversions (in das leere Feld neben “Conversions”)

Und dann legt der Calculator auch schon los und spuckt Euch folgende Werte aus:

• die “Conversion Rate” je Variante (Conversions / Besucher)
• den “Z-Score” (stellt den Abstand vom Mittelwert  aller Messwerte dar; dieser Wert ist fürs erste uninteressant für die meisten von uns)
• der Wert “Confidence” beziffert die Wahrscheinlichkeit dass die Variante besser als die Kontrollvariante ist (sofern dieser Wert >95% ist, so spricht man davon dass das Testergebnis signifikant besser als die Kontrollvariante ist)
• die drei Zahlen in der Spalte “Recommended Sample Size” entsprechen der minimalen Anzahl empfohlener Experiment-Besucher, je nachdem wie sicher man sich der Aussage sein möchte (die  Zahlen basieren der Reihe nach auf 25%, 15% und 5%  Konfidenzindervallen, wobei 25% der “unsicherste” Weg ist und 5% der “sicherste” Weg).

Wer nochmal nachlesen will, warum Statistik bei der Conversion Rate Optimierung so wichtig ist, dem empfehle ich diesen älteren Artikel von mir.

(via Avinash Kaushik auf Twitter)

Ähnliche Beiträge:

• Whichtestwon.com – Inspirationsquelle für CROs
• Customer Engagement – Web Analytics Reloaded?
• WhichMVT.com: Entscheidungshilfe bei der Toolauswahl beim Testing
• Baur.de Best-Practices: Produktvideos und Mouse Tracking
• Website Optimization – Warum Statistik ein wichtiger Faktor bei A/B bzw. multivariaten Tests ist