Een aarden pad dat zich in een bos in twee richtingen splitst

AB-test significantie-calculator

Vul verzendingen en openingen voor beide varianten in — zie of het verschil echt is of gewoon ruis.

Variant A — verzonden e-mails

Variant A — openingen

Variant B — verzonden e-mails

Variant B — openingen

Let opStatistische significantie hangt af van een voldoende grote steekproef — bij heel weinig verzendingen kan dit resultaat onbetrouwbaar zijn, ook als er 'significant' staat.

Hoe het werkt

Een hoger openingspercentage in een kleine test betekent niet altijd dat een onderwerpregel echt won — bij weinig verzendingen kunnen verschillen makkelijk puur toeval zijn. Deze calculator voert een standaard statistische significantietoets uit op je twee varianten.

Veelgestelde vragen

Hoeveel verzendingen heb ik nodig voor een betrouwbaar resultaat?

Er is geen vast getal — het hangt af van de grootte van het verschil tussen de varianten. Als vuistregel: tests met minder dan een paar honderd verzendingen per variant kunnen vaak alleen zeer grote verschillen detecteren.

Wat betekent '95% betrouwbaarheid' eigenlijk?

Het betekent dat als er echt geen verschil was tussen de varianten, een verschil van deze grootte (of groter) maar in ongeveer 5% van de gevallen puur toevallig zou voorkomen — niet dat je 95% zeker weet welke beter is.