الثبات

3.4. طرق تعتمد على اتساق تقديرات الملاحظين أو المصححين

تستخدم بعض أدوات القياس مجموعة واحدة من البنود (مثل، قائمة سلوكات في استبانة الأداء) ولكن يتم جمع ملاحظات أو بيانات عن كل فرد من طرف اثنين أو أكثر من الملاحظين الذين يقيمون أداء الأفراد، وفي هذا الموقف يهمنا تجانس الملاحظات أو البيانات عبر المقدرين أو المصححين المختلفين. وتوجد عدة مؤشرات لتقدير معامل الاتفاق أو التجانس بين المقدرين.

ومن أمثلة الاختبارات التي تستخدم في تقدير ثبات تقديرات المصححين أو الملاحظين، اختبار كاندل Kandall لاتساق التقديرات واختبار Cooper للاتفاق بين التقديرات، واختبار كابا لكوهين Kappa de Cohen في حالة تقديرات ثنائية (نجاح-فشل).

تسمح هذه الاختبارات في تحديد الأخطاء الراجعة لعدم اتساق تقديرات الملاحظين والمصححين الناتجة عن الذاتية من خلال التشدد أو التساهل أثناء عملية التصحيح وأثر الهالة، وعدم وضوح موازين التقدير أو الملاحظة، أو فترة ملاحظة أداء الأفراد. وكلما ازدادت قيمة الخطأ الراجعة لعدم اتساق التقديرات انخفض ثبات الاختبار، وكلما قلت قيمة الخطأ ارتفع ثبات الاختبار.