Calculator pentru dimensiunea eșantionului la testul A/B
Aflați de câți vizitatori are nevoie fiecare variantă a unui test A/B înainte de a-l începe. Introduceți rata de conversie de referință, cea mai mică îmbunătățire relativă pe care doriți să o detectați, nivelul de semnificație și puterea statistică.
Întrebări frecvente
Cum se calculează dimensiunea eșantionului?
Se folosește formula standard pentru compararea a două proporții într-un test bilateral, cu rata de referință, rata de după îmbunătățire, valoarea critică a nivelului de semnificație și valoarea corespunzătoare puterii.
Ce este efectul minim detectabil?
Cea mai mică schimbare relativă pe care doriți ca testul să o detecteze în mod fiabil. O rată de referință de 3% și un efect de 10% înseamnă detectarea unei schimbări la 3.3%.
Ce înseamnă puterea?
Probabilitatea ca testul să detecteze efectul dacă acesta există cu adevărat. 80% este o alegere frecventă; o putere mai mare necesită mai mulți vizitatori.
De ce efectele mici necesită atât de mulți vizitatori?
Dimensiunea necesară a eșantionului crește aproximativ invers proporțional cu pătratul efectului. Dacă înjumătățiți efectul pe care doriți să-l detectați, aveți nevoie de aproximativ de patru ori mai mulți vizitatori.
Cât va dura testul?
Împărțiți dimensiunea totală a eșantionului la numărul de vizitatori pe zi. Rulați testul săptămâni întregi, pentru a include atât zilele lucrătoare, cât și weekendurile.
Ce nivel de semnificație ar trebui să aleg?
95% este valoarea implicită obișnuită. Folosiți 99% când un rezultat fals pozitiv ar fi costisitor; acest lucru mărește dimensiunea eșantionului.