Kalkulator velikosti vzorca za A/B-test
Ugotovite, koliko obiskovalcev potrebuje posamezna različica A/B-testa, preden ga začnete. Vnesite osnovno stopnjo konverzije, najmanjše relativno izboljšanje, ki ga želite zaznati, stopnjo statistične značilnosti in statistično moč.
Pogosta vprašanja
Kako se izračuna velikost vzorca?
S standardno formulo za primerjavo dveh deležev pri dvostranskem testu, ki upošteva osnovno stopnjo, stopnjo po izboljšanju, kritično vrednost za stopnjo statistične značilnosti in vrednost za statistično moč.
Kaj je najmanjši zaznavni učinek?
Najmanjša relativna sprememba, ki jo želite zanesljivo zaznati s testom. Pri osnovni stopnji 3% in učinku 10% pomeni zaznati spremembo na 3.3%.
Kaj pomeni statistična moč?
Verjetnost, da test zazna učinek, če ta v resnici obstaja. Pogosta izbira je 80%; večja statistična moč zahteva več obiskovalcev.
Zakaj majhni učinki zahtevajo toliko obiskovalcev?
Zahtevana velikost vzorca narašča približno sorazmerno z obratno vrednostjo kvadrata učinka. Če prepolovite učinek, ki ga želite zaznati, potrebujete približno štirikrat več obiskovalcev.
Kako dolgo bo trajal moj test?
Skupno velikost vzorca delite s številom obiskovalcev na dan. Test izvajajte cele tedne, da bodo zajeti tako delavniki kot konci tedna.
Katero stopnjo statistične značilnosti naj izberem?
Običajna privzeta izbira je 95%. Izberite 99%, če bi bil lažno pozitiven rezultat drag, saj se s tem poveča potrebna velikost vzorca.