الانتقال إلى المحتوى
العودة إلى نتائج البحث

اختبار أ/ب المحظور — اختبار الانقسام العشوائي المحظور

قدّمه
R. A. Fisher (blocking principle); adapted to online A/B testing by industry practitioners
السنة
1926 (blocking principle); 2000s–2010s (online A/B testing application)
النوع
Randomized controlled experiment with variance reduction
العائلة
Experimental design

هذا النص ترجمة آلية ولم تتم مراجعته بعد. اقرأ النص الأصلي بالإنجليزية

حجم الخط

ماذا تفعل؟

اختبار أ/ب المحظور هو تصميم تجريبي يقسم الوحدات (المستخدمين أو المشاركين أو المجموعات) إلى كتل متجانسة قبل تعيينها عشوائيًا للمعالجة أ أو المعالجة ب داخل كل كتلة. يقلل الحظر من الضوضاء داخل التجربة من خلال ضمان موازنة مصادر التباين المعروفة — مثل نوع الجهاز أو الجغرافيا أو مدة بقاء المستخدم — عبر الظروف، مما يوفر تقديرات أكثر دقة لتأثير المعالجة مقارنة باختبار أ/ب البسيط غير المحظور.

الفكرة الحدسية وراء الطريقة

تخيل اختبار لون زر دفع جديد على موقع للتجارة الإلكترونية. تختلف معدلات الشراء اختلافًا كبيرًا بين مستخدمي الهاتف المحمول وسطح المكتب، لذلك قد يعطي التقسيم العشوائي الساذج عن طريق الخطأ أحد المتغيرات المزيد من مستخدمي الهاتف المحمول. الحظر يحل هذه المشكلة: قم أولاً بتقسيم جميع المستخدمين إلى كتل للهاتف المحمول وسطح المكتب، ثم اقلب عملة معدنية عادلة داخل كل كتلة لتعيين أ أو ب. الآن يرى كلا المتغيرين حصصًا متساوية نسبيًا من مستخدمي الهاتف المحمول وسطح المكتب. تتم مقارنة المعالجة داخل الكتل، لذلك تتم إزالة التباين المدفوع بالجهاز من حد الخطأ، مما يجعل التجربة أكثر حساسية للتأثير الحقيقي للون الزر.

التاريخ

تمت صياغة مبدأ الحظر في التصميم التجريبي رسميًا بواسطة آر. إيه. فيشر في ورقته البحثية عام 1926 حول ترتيب التجارب الميدانية وتم تطويره بشكل أكبر في كتابه عام 1935 "تصميم التجارب". قدم فيشر الحظر كوسيلة لعزل وإزالة مصادر عدم التجانس المعروفة، وبالتالي تحسين دقة مقارنات المعالجة. تم تدوين النهج لاحقًا في تصميم الكتلة الكاملة العشوائية (RCBD). في العقدين الأولين من القرن الحادي والعشرين، قامت شركات التكنولوجيا بتكييف الحظر مع اختبارات أ/ب عبر الإنترنت واسعة النطاق، باستخدام سمات المستخدم مثل نوع الجهاز أو عمر الحساب كمتغيرات حظر للحصول على تقديرات سببية أكثر موثوقية من تجارب الويب.

متى تُستخدم

استخدم اختبار أ/ب محظورًا عندما تعرف مسبقًا أن متغيرًا مشتركًا (نوع الجهاز، شريحة المستخدم، المنطقة الجغرافية، الفترة الزمنية) يرتبط بمقياسك الأساسي وتريد منع اختلال التوازن في هذا المتغير المشترك من تضخيم تقدير الخطأ الخاص بك. إنه ذو قيمة خاصة عندما تكون أحجام العينات معتدلة ولا يمكنك تحمل التباين الذي سيتركه العشوائية البسيطة. لا تستخدم الحظر عندما لا يكون لديك متغيرات مشتركة تنبؤية ذات مغزى — الحمل الزائد غير ضروري وقد تقلل قيود حجم الكتلة من القوة. تجنبه عندما يكون متغير الحظر دقيقًا جدًا بحيث لا ينتج كتلًا تحتوي على وحدات قليلة لكل ظرف، أو عندما لا يمكن تحديد عضوية الكتلة قبل التعيين.

الحدود والاعتبارات

  • يتطلب تحديد متغيرات الحظر مسبقًا؛ لا يمكن استخدام المتغيرات غير المعروفة أو التي لم يتم قياسها قبل التعيين للحظر.
  • أحجام الكتل الصغيرة جدًا (على سبيل المثال، وحدتان إلى 4 وحدات فقط لكل كتلة) تقلل من موثوقية التعيين العشوائي داخل الكتلة ويمكن أن تضر بالقوة بدلاً من مساعدتها.
  • التحليل أكثر تعقيدًا من اختبار t البسيط لعينتين؛ يجب دمج بنية الكتلة بشكل صحيح في النموذج الإحصائي.
  • الحظر على المتغير الخاطئ (غير المرتبط بالنتيجة) لا يوفر تقليلًا للتباين ويضيف حملًا تحليليًا.

لا تغني شروط المصدر عن المراجعة العلمية المستقلة أو التحقق بواسطة محرك تحليل.

نقاط القوة

  • يقلل من تباين الخطأ التجريبي الذي يُعزى إلى المتغيرات المشتركة التنبؤية المعروفة، مما يزيد من القوة الإحصائية دون زيادة حجم العينة.
  • يحمي من اختلال التوازن العرضي للمتغيرات المشتركة الذي يمكن أن يؤدي إلى تحيز تقديرات تأثير المعالجة في العينات المحدودة.
  • يمكن أن توفر تقديرات الكتل نفسها رؤى مفيدة حول تأثيرات المعالجة غير المتجانسة عبر الشرائح.
  • مدعوم على نطاق واسع في الحزم الإحصائية القياسية (ANOVA، الانحدار مع المؤشرات، النماذج المختلطة).
  • نظير مباشر لتصميم الكتلة القياسي الذهبي المستخدم في الأبحاث السريرية والزراعية، مما يمنح النهج مصداقية منهجية قوية.

التطبيقات

  • تجارب المنتجات عبر الإنترنت التي تحظر حسب نوع الجهاز (الهاتف المحمول مقابل سطح المكتب) أو المنصة لمقارنة متغيرات واجهة المستخدم.
  • الدراسات التجريبية السريرية التي تحظر حسب الموقع السريري أو شدة الحالة الأساسية لمقارنة بروتوكولين للعلاج.
  • تجارب تكنولوجيا التعليم التي تحظر حسب المدرسة أو المستوى الدراسي لتقييم تأثير أداة تعلم جديدة.
  • اختبارات التسويق عبر البريد الإلكتروني التي تحظر حسب مرحلة دورة حياة العميل لقياس تأثير متغيرات سطر الموضوع على معدلات الفتح.
  • الدراسات الزراعية والبيئية التي تحظر حسب موقع الحقل أو نوع التربة لمقارنة أصناف المحاصيل أو التدخلات.

كيف يعمل

كيف يعمل

1

حدد الفرضية (على سبيل المثال، المتغير ب يزيد من معدل التحويل)، واختر المقياس الأساسي، وحدد متغيرات الحظر — الخصائص المعروفة أو المشتبه في تأثيرها على النتيجة. متغيرات الحظر الجيدة قابلة للقياس قبل تعيين المعالجة، وترتبط بالنتيجة، ولا تنتج عن المعالجة نفسها.

2

قسّم جميع الوحدات المؤهلة إلى كتل حصرية ومتبادلة وشاملة بناءً على متغيرات الحظر المختارة. تجمع كل كتلة وحدات متشابهة قدر الإمكان في تلك المتغيرات. يجب الحفاظ على عدد الكتل في حدود معقولة؛ يمكن أن يقلل الحظر الدقيق للغاية من القوة الإحصائية إذا أصبحت أحجام الكتل صغيرة جدًا.

3

داخل كل كتلة، قم بتعيين الوحدات عشوائيًا إلى الظرف أ (التحكم) أو الظرف ب (المعالجة) باحتمالية متساوية (أو محددة مسبقًا). هذا التعيين العشوائي داخل الكتلة هو الخطوة الأساسية التي تجعل التصميم عادلاً وقابلاً للتحليل. سجل عضوية الكتلة لكل وحدة قبل بدء التعرض.

4

قدم المتغير المعين لكل وحدة طوال فترة التجربة الكاملة. حافظ على الفصل بين الظروف لمنع التلوث. اجمع بيانات النتيجة مع معرفات الكتل بحيث يتم الحفاظ على بنية الكتلة حتى مرحلة التحليل.

5

حلل النتائج باستخدام نموذج يأخذ في الاعتبار الكتل — عادةً تحليل التباين ثنائي الاتجاه (ANOVA) أو الانحدار مع مؤشرات الكتل كمتغيرات مشتركة، أو ما يعادله من مقارنة مقترنة إذا كانت الكتل تحتوي على وحدة واحدة بالضبط لكل ظرف. تمتص حدود الكتلة التباين الذي يُعزى إلى متغير الحظر، مما يترك تقديرًا أوضح لتأثير المعالجة وفترة ثقة أضيق.

الأخطاء الشائعة

  • تجاهل بنية الكتلة في وقت التحليل — إجراء اختبار t عادي بدون مؤشرات الكتل يتجاهل تقليل التباين الذي كان من المفترض أن يقدمه الحظر ويمكن أن يضخم قيمة p.
  • الحظر بعد الانتهاء — تحديد الكتل بعد رؤية النتائج يؤدي إلى تحيز وليس تصميمًا محظورًا صالحًا.
  • الحظر المفرط مع عدد كبير جدًا من متغيرات الحظر ينتج عنه أحجام كتل صغيرة وغير عملية ويمكن أن يلغي المكاسب الإحصائية للتصميم.
  • الخلط بين الحظر وأخذ العينات الطبقية — الحظر هو آلية تعيين مطبقة على مجموعة ثابتة من الوحدات التجريبية، وليس استراتيجية أخذ عينات.

الأسئلة الشائعة

ما هو الفرق بين اختبار أ/ب المحظور واختبار أ/ب الطبقي؟

غالبًا ما تُستخدم المصطلحات بالتبادل في التطبيقات العملية. بدقة، الحظر هو مفهوم تصميم (تعيين الوحدات داخل المجموعات) بينما يمكن أن يشير التقسيم الطبقي إلى التصميم أو التحليل (إعادة الترجيح بعد الانتهاء). في اختبار أ/ب المحظور، يحدث التعيين العشوائي بشكل منفصل داخل كل كتلة قبل التعرض. في التحليل الطبقي، قد تكون قد أجريت تعيينًا عشوائيًا بدون حظر ولكنك تعيد الترجيح أو تعدل بعد الانتهاء حسب الطبقة. الحظر في وقت التصميم يكون بشكل عام أقوى من التقسيم الطبقي في وقت التحليل.

كيف أختار المتغيرات التي أحظر عليها؟

احظر على المتغيرات التي (1) يمكنك قياسها قبل تعيين المعالجة، (2) يُتوقع أن ترتبط بالمقياس الأساسي للنتيجة، و (3) لا تنتج عن المعالجة نفسها. تشمل الخيارات الشائعة في التجارب عبر الإنترنت نوع الجهاز، وشريحة مدة بقاء المستخدم، والمنطقة الجغرافية. تجنب الحظر على المتغيرات ذات الفئات المتعددة ما لم تكن عينتك كبيرة بما يكفي للحفاظ على أحجام كتل كافية.

هل يغير الحظر متطلبات حجم العينة؟

يمكن للحظر تقليل حجم العينة المطلوب لتحقيق مستوى قوة معين، لأنه يزيل التباين الذي يُعزى إلى متغير الحظر من حد الخطأ. يعتمد كسب الكفاءة على مدى ارتباط متغير الحظر بالنتيجة. إذا كان الارتباط منخفضًا، فإن الحظر يقدم فائدة قليلة وقد يتطلب اختبار أ/ب البسيط موارد تحليلية أقل.

هل يمكنني استخدام تصميم محظور مع أكثر من متغيرين؟

نعم. عندما يكون هناك أكثر من ظرفين، يُطلق على التصميم اسم تجربة متعددة الأذرع محظورة أو تصميم كتلة كاملة عشوائية مع معالجات متعددة. يتم تعيين الوحدات داخل كل كتلة عشوائيًا إلى أحد الظروف k. يعمم التحليل على ANOVA أو الانحدار مع مؤشرات الكتلة والمعالجة، يليه مقارنات مخطط لها أو بعد الانتهاء.

ماذا يحدث إذا نسيت تضمين مؤشرات الكتل في تحليلي؟

إن حذف مؤشرات الكتل يعني فقدان تقليل التباين الناتج عن الحظر. والأسوأ من ذلك، إذا كانت أحجام الكتل غير متساوية، فقد يكون التقدير العادي متحيزًا. قم دائمًا بتضمين تأثيرات ثابتة للكتل (أو حد تأثير عشوائي) في النموذج الإحصائي لتكريم التصميم المحظور واستعادة مكاسب الكفاءة.

طرق ذات صلة

المصادر

  1. Fisher, R. A. (1926). The arrangement of field experiments. Journal of the Ministry of Agriculture of Great Britain, 33, 503–513.

    افتح مرجع المنشور
    تم النسخ.
  2. Kohavi, R., Tang, D., & Xu, Y. (2020). Trustworthy Online Controlled Experiments: A Practical Guide to A/B Testing. Cambridge University Press.

    ردمك: 9781108724265
    تم النسخ.