Calcolatrice della dimensione del campione per test A/B
Scoprite quanti visitatori deve avere ciascuna variante di un test A/B prima di avviarlo. Inserite il tasso di conversione di base, il miglioramento relativo minimo che volete rilevare, il livello di significatività e la potenza statistica.
Domande frequenti
Come viene calcolata la dimensione del campione?
Con la formula standard per confrontare due proporzioni in un test bilaterale, usando il tasso di base, il tasso dopo il miglioramento, il valore critico del livello di significatività e il valore della potenza statistica.
Cos'è l'effetto minimo rilevabile?
È la variazione relativa minima che volete che il test rilevi in modo affidabile. Con un tasso di base del 3% e un effetto del 10%, si tratta di rilevare una variazione fino al 3.3%.
Cosa significa potenza?
È la probabilità che il test rilevi l'effetto, se esiste davvero. L'80% è una scelta comune; una potenza maggiore richiede più visitatori.
Perché per rilevare effetti piccoli servono così tanti visitatori?
La dimensione del campione richiesta cresce approssimativamente con l'inverso del quadrato dell'effetto. Dimezzare l'effetto da rilevare richiede circa quattro volte più visitatori.
Quanto durerà il test?
Dividete la dimensione totale del campione per il numero di visitatori che ricevete al giorno. Eseguite il test per settimane intere, così saranno rappresentati sia i giorni feriali sia i fine settimana.
Quale livello di significatività dovrei scegliere?
Il 95% è l'impostazione predefinita più comune. Scegliete il 99% se un falso positivo avrebbe un costo elevato; ciò aumenta la dimensione del campione.