Jak to funguje
Vyšší míra otevření v malém testu neznamená vždy, že předmět skutečně vyhrál — u malého počtu odeslání mohou být rozdíly snadno jen náhoda. Tato kalkulačka provede standardní statistický test významnosti na vašich dvou variantách.
Kalkulačka významnosti AB testu
Zadejte odeslání a otevření pro obě varianty — zjistěte, zda je rozdíl skutečný, nebo jen šum.
Míra otevření varianty A
Míra otevření varianty B
Rozdíl
PoznámkaStatistická významnost závisí na dostatečně velkém vzorku — při velmi malém počtu odeslání nemusí být tento výsledek spolehlivý, i když ukazuje 'významný'.
Časté dotazy
Kolik odeslání potřebuji pro spolehlivý výsledek?
Neexistuje pevné číslo — záleží na velikosti rozdílu mezi variantami. Jako hrubé vodítko: testy s méně než pár stovkami odeslání na variantu často odhalí jen velmi velké rozdíly.
Co vlastně znamená '95% spolehlivost'?
Znamená to, že kdyby mezi variantami skutečně nebyl žádný rozdíl, rozdíl této velikosti (nebo větší) by se čistě náhodou objevil jen asi v 5 % případů — ne že jste na 95 % jistí, která varianta je lepší.