حاسبة دلالة اختبار A/B
تحقق مما إذا كان الفرق بين معدلي التحويل دالًا إحصائيًا. أدخل عدد الزوار والتحويلات للنسختين A وB، واحصل على المعدلين والزيادة النسبية وفترة ثقة للفرق ودرجة z والقيمة الاحتمالية p ثنائية الطرف.
الأسئلة الشائعة
ما الاختبار المستخدم؟
اختبار z ثنائي الطرف لنسبتين مع خطأ معياري مجمّع، وهو الاختبار القياسي لمقارنة معدلي التحويل لمجموعتين.
ماذا تخبرني القيمة الاحتمالية p؟
احتمال رصد فرق بهذا الحجم على الأقل إذا كان أداء النسختين متساويًا فعلًا في التحويل. إذا كانت القيمة أقل من 1 ناقص مستوى الثقة، مثلًا أقل من 0.05 عند مستوى ثقة 95%، تُعد النتيجة دالة إحصائيًا.
ما الزيادة النسبية؟
مقدار ارتفاع معدل التحويل للنسخة B أو انخفاضه مقارنةً بالنسخة A، كنسبة مئوية من معدل النسخة A. يُعد الانتقال من 2% إلى 2.5% زيادة قدرها 25%.
هل يمكنني إيقاف الاختبار بمجرد أن تصبح النتيجة دالة؟
يؤدي تكرار الفحص وإيقاف الاختبار عند أول نتيجة دالة إلى زيادة النتائج الإيجابية الكاذبة. حدّد حجم العينة مسبقًا، مثلًا باستخدام حاسبة حجم عينة اختبار A/B، ثم قيّم النتيجة مرة واحدة.
ماذا توضح فترة الفرق؟
نطاق القيم المعقولة لمعدل النسخة B ناقص معدل النسخة A، بالنقاط المئوية، عند مستوى الثقة المختار. إذا شملت الفترة الصفر، فالاختبار غير دال إحصائيًا.
هل تعمل مع الأعداد الصغيرة جدًا؟
يعتمد اختبار z على التقريب الطبيعي ويحتاج إلى عدد كافٍ من التحويلات في كل مجموعة؛ والقاعدة التقريبية هي 10 على الأقل. إذا كان العدد أقل، فالنتيجة غير موثوقة.