A/B testo imties dydžio skaičiuotuvas
Sužinokite, kiek lankytojų reikia kiekvienam A/B testo variantui, prieš jį pradedant. Įveskite pradinį konversijų rodiklį, mažiausią santykinį pagerėjimą, kurį norite aptikti, reikšmingumo lygį ir statistinę galią.
Dažnai užduodami klausimai
Kaip apskaičiuojamas imties dydis?
Pagal standartinę dviejų proporcijų palyginimo dvipusiame teste formulę, naudojant pradinį rodiklį, pagerėjusį rodiklį, reikšmingumo lygio kritinę reikšmę ir statistinės galios reikšmę.
Kas yra mažiausias aptinkamas efektas?
Tai mažiausias santykinis pokytis, kurį testas turi patikimai aptikti. Jei pradinis rodiklis yra 3%, o efektas – 10%, reikia aptikti pokytį iki 3.3%.
Ką reiškia statistinė galia?
Tikimybė, kad testas aptiks efektą, jei jis iš tikrųjų egzistuoja. Dažnai pasirenkama 80% galia; didesnei galiai reikia daugiau lankytojų.
Kodėl mažiems efektams aptikti reikia tiek daug lankytojų?
Reikalingas imties dydis apytiksliai auga atvirkščiai proporcingai efekto kvadratui. Jei norimą aptikti efektą sumažinsite perpus, reikės maždaug keturis kartus daugiau lankytojų.
Kiek laiko truks mano testas?
Bendrą imties dydį padalykite iš lankytojų, kurių sulaukiate per dieną, skaičiaus. Vykdykite testą ištisomis savaitėmis, kad būtų atstovaujamos ir darbo dienos, ir savaitgaliai.
Kokį reikšmingumo lygį pasirinkti?
Įprastai pasirenkama 95%. Rinkitės 99%, jei klaidingai teigiamas rezultatas brangiai kainuotų; tokiu atveju reikia didesnės imties.