Калкулатор за размер на извадката за A/B тест
Разберете колко посетители са необходими за всеки вариант на A/B теста, преди да го започнете. Въведете базовия процент на реализация, най-малкото относително подобрение, което искате да откриете, нивото на значимост и статистическата мощност.
Често задавани въпроси
Как се изчислява размерът на извадката?
Със стандартната формула за сравняване на два дяла при двустранен тест, която използва базовия процент, процента след подобрението, критичната стойност за нивото на значимост и стойността за мощността.
Какво представлява минималният откриваем ефект?
Най-малката относителна промяна, която искате тестът надеждно да открие. При базова стойност 3% и ефект 10% това означава откриване на промяна до 3.3%.
Какво означава мощност?
Вероятността тестът да открие ефекта, ако той действително съществува. 80% е често срещан избор; по-високата мощност изисква повече посетители.
Защо малките ефекти изискват толкова много посетители?
Необходимият размер на извадката нараства приблизително обратно пропорционално на квадрата на ефекта. Ако намалите наполовина ефекта, който искате да откриете, ще са ви нужни около четири пъти повече посетители.
Колко дълго ще продължи тестът ми?
Разделете общия размер на извадката на броя посетители на ден. Провеждайте теста цели седмици, за да включите както делнични, така и почивни дни.
Какво ниво на значимост да избера?
95% е обичайният избор по подразбиране. Използвайте 99%, когато фалшив положителен резултат би бил скъп, но това увеличава размера на извадката.