Ein echter A/B-Test braucht rund 1.500 Conversions pro Variante. Die wenigsten Seiten haben das — und fast jede Agentur verkauft es trotzdem. Wir rechnen es dir vor, bevor du zahlst. Und wenn Testen bei dir nicht geht, sagen wir es und machen die Arbeit, die auch ohne wirkt.
Wie viel Traffic ein A/B-Test braucht, ist keine Meinung. Es ist eine Formel. Hier ist sie, für eine Seite mit 2 % Conversion-Rate.
Und du weißt vorher nie, wie groß der Effekt sein wird. Du musst also für den kleinen Fall planen.
| Gesuchter Uplift | Besucher pro Variante | Gesamt pro Test | Bei 5.000 Besuchen/Monat |
|---|---|---|---|
| 5 % | 309.928 | 619.855 | 124 Monate |
| 10 % | 78.039 | 156.078 | 31 Monate |
| 20 % | 19.784 | 39.568 | 8 Monate |
| 50 % | 3.292 | 6.585 | 1,3 Monate |
Halbierst du den gesuchten Effekt, vervierfacht sich der nötige Traffic. Deshalb lehnt Speero — die Agentur hinter CXL, 10.000 $/Monat — öffentlich jeden Kunden unter 100.000 Besuchern im Monat ab und schickt ihn in Conversion-Research statt Testing. Das ist das teuerste Eingeständnis der Branche und deshalb das glaubwürdigste.
Bei 5.000 Besuchen im Monat dauert ein einziger Test auf einen 10-%-Uplift zweieinhalb Jahre. Wer dir trotzdem „A/B-Testing mit statistischer Signifikanz" verkauft, verkauft dir etwas, das es bei dir nicht geben kann.
Rechne meine Zahlen durch →Anteil der A/B-Tests, die die Zielkennzahl tatsächlich verbessern — bei Firmen mit eigenen Statistik-Teams und Millionen Nutzern.
„Wir waren an zehntausenden A/B-Tests bei Airbnb, Booking, Amazon und Microsoft beteiligt und haben nie eine Änderung gesehen, die Conversions auch nur annähernd so stark verbessert."
— über eine CRO-Case-Study, die „+337 % Conversions" behauptete. Sein Befund zum realen Ausmaß: „Echter Fortschritt entsteht durch kleine, kontinuierliche Verbesserungen: 0,1 %–1 % nach viel Arbeit."Nicht dein Budget. Wir sagen dir im Erstgespräch, welcher es ist — auch wenn der günstigere für uns weniger einbringt.
Testen geht bei dir nicht — die Rechnung oben zeigt warum. Also messen wir nicht, sondern entscheiden fundiert: auf Basis von echtem Nutzerverhalten, Heuristik und zehn Jahren Erfahrung damit, woran Funnels scheitern.
Du hast das Volumen für echte Tests. Dann fahren wir sie — und zwar richtig: mit vorab festgelegter Stichprobengröße, ohne frühes Reinschauen, mit Replikation jedes Gewinners.
Diese drei Dinge sind in der CRO-Branche Standard. Jedes einzelne erzeugt Zahlen, die gut aussehen und nichts bedeuten.
„Wir steigern deine Conversion um 87 %" ist keine Prognose, sondern ein Verkaufsargument. Kohavi hat in zehntausenden Tests nie etwas in dieser Größenordnung gesehen — realistisch sind 0,1–1 % pro gewonnenem Test.
Wir garantieren Methodik und Transparenz. Keine Zahl, die niemand kennen kann.
Ins laufende Ergebnis schauen und bei „95 % Signifikanz!" abbrechen — so entstehen die meisten Agentur-Erfolge. Die echte Falsch-Positiv-Rate steigt dadurch von 5 % auf 26,1 %. Jeder vierte „Gewinner" ist dann Rauschen.
Wir legen die Stichprobengröße vorher fest und halten uns daran.
Aus Microsofts Forschung: Bei fünf getesteten Varianten steigt die Falsch-Positiv-Rate von 2,5 % auf 12 %. Bei sechs Runden à fünf Varianten liegt die Chance auf ein „signifikantes" Ergebnis über 50 % — auch wenn die Änderung nachweislich nichts bewirkt.
Genau so produziert man Erfolgsberichte aus toten Hypothesen.
In unserer Recherche hat keine einzige deutschsprachige CRO-Agentur eine echte Preisliste veröffentlicht. Manche betreiben eine Seite „Was kostet CRO?", auf der keine einzige Zahl steht. Hier sind unsere.
Alle Preise netto zzgl. USt. · Das Audit (990 €) wird bei Abschluss einer Betreuung vollständig auf den ersten Monat angerechnet · Monatlich kündbar, keine Mindestlaufzeit, keine Setup-Gebühr · Schweizer Kunden werden in CHF abgerechnet
Die überprüfbaren Vergleichswerte im DACH-Raum: 1.500–3.000 €/Monat im Einstieg (Löwenstark) und die Empfehlung, mit mindestens 3.000 €/Monat zu planen (suxeedo). Speero in den USA nimmt 10.000 $. Wir liegen darunter — aus drei Gründen, von denen keiner „weniger Qualität" ist.
Kein Overhead. Keine Account-Manager, keine Slide-Deck-Abteilung. Du arbeitest mit dem Gründer.
Keine Testing-Theater-Posten. Wir berechnen dir keine A/B-Tests, die bei deinem Traffic ohnehin nur Rauschen messen. Bei vielen Anbietern ist genau das der größte Rechnungsposten.
Maximal sechs Betreuungen. Wir skalieren über Auswahl, nicht über Masse.
Ich baue seit über zehn Jahren Funnels, die konvertieren sollen — und habe dabei genug Tests gesehen, die nichts bewiesen haben, um zu wissen, wann man sie besser sein lässt. Der Unterschied zwischen Amateur und Profi im CRO ist nicht, wer mehr testet. Es ist, wer weiß, wann Testen Unsinn ist.
Solche Zahlen stehen auf fast jeder CRO-Seite. Sie entstehen fast immer gleich: ein Test mit zu wenigen Teilnehmern, früh abgebrochen, im richtigen Moment. Bei geringer Teststärke übertreibt ein signifikantes Ergebnis den Effekt systematisch — das nennt sich Winner's Curse. Eine Meta-Analyse von 115 öffentlichen CRO-Tests fand: mittlerer Uplift 3,77 %, nur 46 % überhaupt signifikant, rund 70 % unterpowert. Die „Gewinner" darin waren im Schnitt fast dreimal so groß wie der wahre typische Effekt.
Diese Seite hatte bis vor Kurzem selbst „87 % durchschnittliche Conversion-Steigerung" in ihrer Beschreibung stehen. Das war nicht belegbar, und wir haben es entfernt — statt es hinter Kleingedrucktem zu verstecken, wie es in dieser Branche üblich ist.
Was wir dir stattdessen anbieten: die Rechnung für deine eigenen Zahlen, bevor du zahlst. Reicht dein Traffic, testen wir — und du bekommst echte Ergebnisse in ehrlichen Größenordnungen. Reicht er nicht, sagen wir es und machen die Arbeit, die auch ohne Testing wirkt. Was wir nicht tun: dir eine Zahl versprechen, die niemand kennen kann.
Conversion-Audit für 990 € — anrechenbar auf den ersten Monat. Du bekommst die Funnel-Analyse, die priorisierte Maßnahmenliste und die Power-Rechnung für deine echten Zahlen. Danach weißt du, ob Testen bei dir überhaupt möglich ist. Der Report gehört dir, auch wenn du nicht weitermachst.
Unverbindliche Anfrage →