Υπολογιστής μεγέθους δείγματος A/B test
Μάθετε πόσους επισκέπτες χρειάζεται κάθε παραλλαγή ενός A/B test πριν το ξεκινήσετε. Εισαγάγετε το βασικό ποσοστό μετατροπής, τη μικρότερη σχετική βελτίωση που θέλετε να εντοπίσετε, το επίπεδο σημαντικότητας και τη στατιστική ισχύ.
Συχνές ερωτήσεις
Πώς υπολογίζεται το μέγεθος δείγματος;
Με τον καθιερωμένο τύπο σύγκρισης δύο αναλογιών σε έλεγχο δύο κατευθύνσεων, χρησιμοποιώντας το βασικό ποσοστό, το ποσοστό μετά τη βελτίωση, την κρίσιμη τιμή του επιπέδου σημαντικότητας και την τιμή της ισχύος.
Τι είναι το ελάχιστο ανιχνεύσιμο αποτέλεσμα;
Η μικρότερη σχετική μεταβολή που θέλετε να εντοπίζει αξιόπιστα το τεστ. Βασικό ποσοστό 3% και αποτέλεσμα 10% σημαίνουν εντοπισμό μεταβολής στο 3.3%.
Τι σημαίνει ισχύς;
Η πιθανότητα το τεστ να εντοπίσει το αποτέλεσμα, αν αυτό υπάρχει πραγματικά. Το 80% είναι μια συνηθισμένη επιλογή· μεγαλύτερη ισχύς απαιτεί περισσότερους επισκέπτες.
Γιατί τα μικρά αποτελέσματα απαιτούν τόσο πολλούς επισκέπτες;
Το απαιτούμενο μέγεθος δείγματος αυξάνεται περίπου αντιστρόφως ανάλογα με το τετράγωνο του αποτελέσματος. Αν το αποτέλεσμα που θέλετε να εντοπίσετε είναι το μισό, χρειάζεστε περίπου τετραπλάσιους επισκέπτες.
Πόσο θα διαρκέσει το τεστ μου;
Διαιρέστε το συνολικό μέγεθος δείγματος με τους επισκέπτες που έχετε ανά ημέρα. Εκτελέστε το τεστ για ολόκληρες εβδομάδες, ώστε να περιλαμβάνονται τόσο οι καθημερινές όσο και τα σαββατοκύριακα.
Ποιο επίπεδο σημαντικότητας πρέπει να επιλέξω;
Το 95% είναι η συνήθης προεπιλογή. Χρησιμοποιήστε 99% όταν ένα ψευδώς θετικό αποτέλεσμα θα είχε μεγάλο κόστος· αυτό αυξάνει το μέγεθος δείγματος.