من التباين في الاستجابة بحيث يكشف عن معاملات ارتباط ذات مغزى . ومع ذلك فإن المقوم كثيراً ما يكون ملتزما بتطوير البرامج التعليمية لتحسين أداء المتعلم المرتفع التجانس الأمر الذى يؤدى إلى تضييق المدى وإنقاصه مما يخلق مشكلات لأولئك الذين يستخدمون الأساليب التقليدية في تطوير الاختبارات . ولهذا السبب ينبغى على المقومين أن يلتفتوا إلى ما يظهر من
تطورات جديدة فى عمليات تحليل بيانات الاختبارات المرجعية المحك
وهناك مشكلة أخرى تتصل بمدى تجانس الاستجابات وبما ينبغي أن يكون عليه مدى تجانس الاستجابات للعناصر ومن المؤكد على سبيل المثال أنه فى أق مجال من مجالات عناصر اختبارات التحصيل ستوجد عناصر أكثر صعوبة وعناصر أقل صعوبة . والحق أننا لو اتبعنا قواعد تعريف المجال وتحديده على نحو جيد تتوقع أن نواجه عددا من العناصر تتفاوت تفاوتا كبيراً في صعوبتها . ولتوضيح ذلك فإن بعض مسائل جمع عدزين يتكون كل منهما من رقمين أصعب من البعض الآخر
۹۹
۹۹ +
مقابل
۱۰
10+
والنقطة التى ينبغى علينا أن نتخذ قرارا بصددها هي ما إذا كانت العناصر
بحيث
المختلفة في صعوبتها تؤدى وظيفة مختلفة عن بقية العناصر في المجال تمثل عنصراً معيبا أم أنها تظهر الحاجة إلى إحداث تغيير في تعريف المجال . إن هذه النقطة أو هذا السؤال يستحق مزيدا من العناية من قبل المتخصصين في القياس المرجعي المحك
الطرق القياسية والطريقة الاستقرائية :
إن ما نواجهه عند محاولة تحسين تعريفات المجال المرجعية المحك وفى نفس
الكتاب — ص ٤٠٩