حاسبة حجم عينة الاختبار A/B.
قبل تقسيم جمهور SMS أو WhatsApp، حدد عدد المستلمين المطلوب لكل متغير لضمان صحة النتائج إحصائيًا، وليس مجرد تشويش. أدخل معدل التحويل الأساسي، وأصغر زيادة جديرة بالملاحظة، ومستوى الثقة وقوة الاختبار، واحصل على العينة المطلوبة لكل متغير وإجمالي العينة. كل ذلك يتم عبر متصفحك.
الحسابات الرياضية قياسية ودقيقة؛ أما الموثوقية فتعتمد على افتراضاتك.
يستخدم هذا الأسلوب صيغة حجم العينة ذات النسبتين المتعارف عليها. ويفترض أن كل مستلم يستجيب بشكل مستقل، وأنك تحدد حجم العينة مسبقًا وتقرأ النتيجة مرة واحدة في النهاية (اختبار ذو أفق زمني ثابت)، وأن خط الأساس الذي تدخله يمثل البيانات الأساسية. لا نبتكر أي معايير مرجعية، بل أنت من يحدد خط الأساس. إن التحقق المتكرر من الاختبار والتوقف بمجرد ظهور نتيجة ذات دلالة إحصائية ("النظر السريع") يؤدي إلى تضخيم النتائج الإيجابية الخاطئة بشكل يتجاوز مستوى الثقة المعلن؛ لذا حدد حجم الاختبار، ثم دعه يعمل.
اختبارك
معدل التحويل الذي تتحكم فيه حاليًا - النقرات، والردود، والمشتريات، والاشتراكات، وأي شيء آخر تعتبره تحويلاً.
نسبي: على سبيل المثال، +10 تعني تحسنًا بنسبة 10٪ على خط الأساس - من 5٪ إلى 5.5٪.
مستوى الثقة 95% ← α = 0.05، وهو معدل النتائج الإيجابية الخاطئة المسموح به. يتطلب مستوى ثقة أعلى عينة أكبر. احتمالية اكتشاف ارتفاع حقيقي بهذا الحجم. 80% نسبة شائعة؛ أما 90% فهي نسبة أكثر صرامة وتتطلب عددًا أكبر من المستفيدين.
الاختبارات ثنائية الطرف تُحدد ما إذا كان المتغير يختلف أصلاً (موصى بها). أما الاختبارات أحادية الطرف فتُستخدم فقط لاختبار التحسين وتتطلب عينة أصغر.
بما في ذلك عنصر التحكم. 2 = A/B الكلاسيكي. تُطبّق متغيرات أخرى تصحيح Bonferroni وتحتاج إلى جمهور أكبر.
إجمالي عدد جهات الاتصال التي يمكنك تسجيلها يوميًا عبر جميع المتغيرات. يُستخدم لتقدير المدة التي سيستغرقها الاختبار.
العينة المطلوبة
اختبار النسبتين · حجم عينة ثابت يتم تحديده مسبقًا · قراءة واحدة في النهاية · يقوم المستلمون بالتحويل بشكل مستقل.
يتم حساب عدد المتغيرات (n) لكل متغير من خلال الصيغة القياسية ذات النسبتين باستخدام مدخلاتك الدقيقة:
p̄ = (0.0500 + 0.0550) / 2 = 0.0525
z(α) = 1.9600 z(β) = 0.8416
n = (z(α)·√(2·p̄·(1−p̄)) + z(β)·√(p₁(1−p₁)+p₂(1−p₂)))² / (p₂−p₁)²
n per variant = 31,234 ×2 variants = 62,468عند التلصصلا يكون حجم العينة هذا صالحًا إلا إذا حددته مسبقًا وقمت بتقييم الاختبار مرة واحدة فقط في النهاية. قد يؤدي الفحص اليومي والتوقف عند ظهور أي نتيجة ذات دلالة إحصائية إلى مضاعفة معدل النتائج الإيجابية الخاطئة عدة مرات. إذا كنت بحاجة إلى المراقبة أثناء الرحلة، فاستخدم طريقة تسلسلية أو بايزية مصممة خصيصًا لهذا الغرض.
أدخل خط الأساس بين 0 و 100% والحد الأدنى للتأثير القابل للكشف أكبر من الصفر لرؤية العينة المطلوبة.
الإجابة المختصرة
كم عدد الأشخاص الذين تحتاجهم في اختبار A/B؟
يكفي أن يظهر فرق حقيقي بالحجم الذي يهمك فوق الضوضاء العشوائية للتحويل. يزداد حجم العينة المطلوب لكل متغير عندما يكون معدل التحويل الأساسي منخفضًا، وعندما يكون التحسن الذي ترغب في اكتشافه ضئيلاً، وعندما تتطلب مستوى أعلى من الثقة أو القوة الإحصائية. وينخفض عندما يكون التأثير كبيرًا أو عندما تقبل مخاطرة أكبر. تطبق هذه الآلة الحاسبة صيغة حجم العينة القياسية ذات النسبتين، بحيث يكون اختبار SMS أو WhatsApp الخاص بك قادرًا على اكتشاف التحسن فعليًا - بدلاً من أن ينتهي بنتيجة غير حاسمة، أو الأسوأ من ذلك، إعلان فائز كان في الواقع محض صدفة.
كيفية إجراء الحساب
تُدخل معدلي تحويل: المعدل الأساسي (p₁) والمعدل المستهدف الذي ترغب في رصده (p₂)، والمستمد من الحد الأدنى للتأثير القابل للكشف. بناءً على مستوى ثقتك، يحسب البرنامج z(α) - وهو عدد الانحرافات المعيارية التي تحدد معدل النتائج الإيجابية الخاطئة - وبناءً على قوة الاختبار، يحسب z(β). تُستخدم هاتان القيمتان في صيغة النسبتين أدناه لحساب الحد الأدنى للمستلمين لكل متغير. المجموع هو حاصل ضرب هذا الرقم في عدد المتغيرات. تُحسب قيم z تلقائيًا باستخدام دالة التوزيع الطبيعي العكسي التقريبي، لذا فإن أي مستوى ثقة أو قوة اختبار مناسبة، وليس فقط الإعدادات المسبقة الشائعة.
الصيغة
مع p̄ = (p₁ + p₂) / 2، فإن العينة المطلوبة لكل متغير هي:
| معدل مجمع | p̄ = (p₁ + p₂) / 2 |
|---|---|
| z(α) ذو ذيلين | Φ⁻¹(1 − α/2) |
| z(α) ذو ذيل واحد | Φ⁻¹(1 − α) |
| z(β) | Φ⁻¹(power) |
| ن لكل متغير | (z(α)·√(2·p̄·(1−p̄)) + z(β)·√(p₁(1−p₁)+p₂(1−p₂)))² / (p₂ − p₁)² |
| إجمالي الجمهور | n × number of variants |
القيم z الشائعة
للعلم، فإن الإعدادات المسبقة تُطابق هذه القيم الحرجة القياسية (محسوبة، وليست مُستخرجة):
| مستوى | z(α) ذو ذيلين | قوة z(β) |
|---|---|---|
| 90% | 1.645 | 1.282 |
| 95% | 1.960 | 1.645 |
| 99% | 2.576 | — |
| 80% power | — | 0.842 |
تأتي قيم z من معكوس التقريب العقلاني لـ Acklam للتوزيع الطبيعي القياسي CDF (الخطأ النسبي أقل من 1.15 × 10⁻⁹)، لذلك يتم دعم قيم الثقة والقوة التعسفية.
الأسئلة الشائعة
ما هو الحد الأدنى للتأثير القابل للكشف (MDE)، المطلق مقابل النسبي؟
يمثل MDE أصغر ارتفاع ترغب في أن يرصده الاختبار. يُقاس الارتفاع المطلق بنقاط مئوية: فمثلاً، من خط أساس 5%، تعني زيادة نقطة مئوية واحدة رصد ارتفاع إلى 6%. أما الارتفاع النسبي فهو نسبة مئوية من خط الأساس: فزيادة نسبية 10% تعني رصد ارتفاع من 5% إلى 5.5%. يصعب إثبات الارتفاعات الأصغر من MDE، وتتطلب جمهورًا أكبر بكثير، لذا اضبطه على أصغر ارتفاع من شأنه أن يُغير قرارك فعليًا.
ماذا تعني الثقة والقوة في الواقع؟
يُحدد مستوى الثقة (1 − α) احتمالية النتائج الإيجابية الخاطئة؛ فعند مستوى ثقة 95%، تقبل احتمال 5% لاعتبار فرق ما حقيقيًا بينما هو ليس كذلك. أما مستوى القدرة (1 − β) فهو احتمال اكتشاف زيادة حقيقية بالحجم المُختار؛ فعند مستوى قدرة 80%، ستفوتك فرصة اكتشاف تأثير حقيقي مرة واحدة من كل خمس مرات. يؤدي رفع أيٍّ من هذين المستويين إلى جعل الاختبار أكثر دقة ويزيد من حجم العينة المطلوب.
اختبار ذو ذيل واحد أم ذو ذيلين؟
استخدم اختبار ذي طرفين إلا إذا كان لديك سبب وجيه لعدم استخدامه. يسأل هذا الاختبار "هل المتغير مختلف؟" ويحميك إذا كان المتغير أسوأ بالفعل. أما الاختبار ذو الطرف الواحد فيسأل فقط "هل المتغير أفضل؟" - وهو يحتاج إلى عينة أصغر ولكنه يتجاهل احتمال الضرر، وهو أمر نادرًا ما ترغب فيه في حملة حقيقية.
هل يمكنني اختبار أكثر من نوعين؟
نعم. حدد عدد المتغيرات (بما في ذلك عنصر التحكم). عند وجود أكثر من متغيرين، يطبق الحاسب تصحيح Bonferroni، حيث يقسم α على المقارنات مع عنصر التحكم، بحيث يبقى معدل النتائج الإيجابية الخاطئة الإجمالي ضمن مستوى الثقة المحدد. هذا التصحيح متحفظ ويزيد من حجم الجمهور الذي يحتاجه كل متغير.
لماذا لا يمكنني إيقاف الاختبار بمجرد أن يبدو ذا دلالة؟
لأن هذه الصيغة تفترض حجم عينة ثابتًا يُقرأ مرة واحدة في النهاية. في كل مرة تُلقي نظرة سريعة وتستطيع التوقف، تُتاح لك فرصة أخرى للوقوع ضحية للتشويش، لذا فإن تكرار النظر السريع قد يُضاعف معدل النتائج الإيجابية الخاطئة الحقيقي إلى ما هو أبعد بكثير من نسبة الـ 5% التي ظننت أنك حددتها. حدد حجم العينة مسبقًا واتركها تعمل. إذا كان لا بد من المراقبة المستمرة، فاستخدم تصميمًا تسلسليًا أو بايزيًا مُصممًا خصيصًا لذلك.
هل هذا صحيح بالنسبة لحملات SMS و WhatsApp؟
تُعدّ الإحصائيات معيارية ودقيقة لمقارنة نسب التحويل، وهو ما تُجريه معظم اختبارات الرسائل النصية A/B - مقارنة معدلات النقر والرد والاشتراك والشراء بين مختلف الخيارات. تعتمد الدقة على مُدخلاتك: خط أساس تمثيلي، ومستلمون مستقلون، وقراءة واحدة واضحة في النهاية. لا تُنشئ الأداة أي معايير؛ أنت تُقدّم خط الأساس والزيادة التي تهمّك.
إيرادات المشروع، والتكاليف، والعائد على الاستثمار بمجرد أن يختار اختبارك الفائز.
التجزئة، ومسارات العملاء، والحملات المتوافقة على نطاق واسع.
الترميز، والمقاطع، وتكلفة الرسالة التي سترسلها.
جميع الآلات الحاسبة المجانية BroadNet وأدوات المطورين.
قم بتنفيذ الحملة الناجحة على نطاق واسع.
حدد حجم الاختبار هنا، ثم أرسله عبر بنية تحتية مصممة لضمان وصول الرسائل - SMS، WhatsApp، بالإضافة إلى خدمة الصوت عبر شبكة مزودي الخدمة المباشرة لدينا. تواصل مع فريقنا للاستفسار عن التوجيه، ومعدل نقل الرسائل، والأسعار.