تحليل جودة الأسئلة من بيانات الأداء

السؤال الذي كُتب بعناية وروجع لغويًا قد يكون معيبًا، ولا يظهر ذلك إلا بعد أن يجيب عنه متعلمون فعليون. فبعض العيوب لا تُرى بالقراءة وتُرى في البيانات.

وتحليل الأسئلة يحوّل بنكك من مجموعة أسئلة إلى أداة قياس موثوقة. وهذه المقالة تعرض مؤشراته الثلاثة وكيف تُقرأ وتُعالج بلا تعقيد إحصائي.

المؤشرات الثلاثة

قراءة نسبة الإجابة الصحيحة

• الجميع أجاب صحيحًا — لا يميّز، أو بديهي.
• الجميع أخطأ — غامض أو لم يُدرَّس.
• نسبة متوسطة — الأفضل عادة للقياس.
• نسبة منخفضة جدًا — راجع الصياغة والإجابة.
• قفزة مفاجئة — مؤشر تسرّب محتمل.

والحالة الأولى لا تعني بالضرورة حذف السؤال: في اختبار إتقان يُراد منه التأكد أن الجميع يعرف نقطة حرجة، السؤال السهل مقصود. والمعيار يتبع غرض الاختبار لا قاعدة مطلقة.

والحالة الخامسة تستحق انتباهًا أمنيًا: سؤال ارتفعت نسبة نجاحه فجأة بلا تغيير في التدريب مؤشر تداول. وسحبه واستبداله أسهل من التحقيق. راجع مميزات المنصة وحلول تدريب المنشآت.

قراءة توزيع البدائل

توزيع اختيارات المتعلمين على البدائل يكشف جودة كل بديل على حدة.

والبديل الذي لا يختاره أحد لا يضيف شيئًا: يجعل السؤال ثلاثيًا فعليًا ويرفع احتمال التخمين. واستبدله ببديل يمثل خطأ حقيقيًا.

والبديل الذي يختاره كثيرون بما فيهم متفوقون يستحق فحصًا: قد يكون صحيحًا في سياق ما، أو صياغته توحي بأنه المطلوب.

والتوزيع المتوازن نسبيًا على البدائل الخاطئة علامة جودة: كل بديل جذب من حمل تصورًا مغلوطًا معينًا — وهذا يخبرك بأنواع سوء الفهم لا بوجوده فقط.

كم إجابة تكفي للتحليل

التحليل على عينة صغيرة يضلل: نتيجة عشرة متعلمين قد تكون صدفة بحتة.

وانتظر عددًا معقولًا قبل الحكم — عشرات لا آحاد — واقرأ الاتجاه عبر دفعات لا دفعة واحدة. فسؤال بدا صعبًا مع مجموعة قد يكون طبيعيًا مع أخرى.

وميّز بين خصائص السؤال وخصائص المجموعة: دفعة كاملة أخطأت في سؤال قد تكون لم تُدرَّس النقطة جيدًا لا أن السؤال معيب. وقارن بدفعات أخرى قبل الحكم.

وسجّل تاريخ كل قياس: صعوبة قيست قبل عامين قد لا تصح اليوم إن تغيّر المحتوى أو الجمهور.

ماذا تفعل بالنتائج

التحليل بلا إجراء تقرير يُقرأ. وثبّت دورة معالجة بعد كل دفعة.

وصنّف الأسئلة إلى: سليمة تبقى، وتحتاج تعديلًا في الصياغة أو بديل، وتُسحب مؤقتًا للمراجعة، وتُحذف نهائيًا.

وعالج الأولوية: أسئلة التمييز السالب أولًا — فهي تظلم المتفوقين وتُبطل عدالة الاختبار — ثم البدائل الميتة، ثم الصعوبة غير المناسبة.

ووثّق ما غيّرته ولماذا: فسؤال عُدّل يحتاج قياسًا جديدًا، والاحتفاظ بتاريخه يمنع تكرار نفس التعديل ويبني معرفة عن أنماط العيوب لديك.

ما وراء المؤشرات

الأرقام تشير إلى العيب ولا تفسّره، والتفسير يحتاج قراءة السؤال بعد رؤية بياناته.

وحين يظهر سؤال معيب، افحص: هل الصياغة تحتمل معنيين؟ وهل يوجد بديل صحيح ثانٍ في حالة معينة؟ وهل السؤال يعتمد على معلومة لم تُشرح؟ وهل تعبيره مختلف عمّا استُخدم في المحتوى؟

والاحتمال الأخير شائع: سؤال يستخدم مصطلحًا لم يرد في المقرر يقيس معرفة عامة لا ما دُرِّس. واستخدم نفس المصطلحات الواردة في المحتوى.

واسأل من أخطأوا إن أمكن: عبارة من متعلم — «ظننت أن السؤال يقصد كذا» — تكشف العيب في ثوانٍ وتوفر تخمينًا طويلًا.

أسئلة شائعة

الخلاصة

ابدأ بمؤشر التمييز فهو الأهم وأقلها استخدامًا: سؤال يجيب عنه الضعفاء أكثر من المتفوقين إما مضلل الصياغة أو إجابته المعتمدة خاطئة — وهذا يظلم من فهم. واستبدل البدائل التي لا يختارها أحد، فهي تجعل السؤال ثلاثيًا وترفع التخمين. وانتبه للقفزة المفاجئة في نسبة النجاح، فهي مؤشر تسرّب. ولا تحلل على عينة صغيرة، وميّز بين عيب السؤال وضعف تدريب الدفعة. وعالج التمييز السالب أولًا.

والقاعدة الجامعة: بنك الأسئلة أصل يُصان بالبيانات لا مجموعة تُكتب مرة. فكل دفعة تخوض اختبارك تعطيك معلومات عن أسئلتك أكثر مما تعطيك عن متعلميك — ومن يقرؤها يبني أداة قياس تتحسن سنويًا، ومن يهملها يبقى يقيس بأداة لا يعرف دقتها.

البدء بأقل جهد

تحليل كل أسئلتك دفعة واحدة مشروع يُهجَر، والبدء المحدود يعطي نتيجة سريعة.

وابدأ باختبار واحد عالي الأهمية — ما تُبنى عليه شهادة أو قرار — وحلّل أسئلته بعد أول دفعة كبيرة. فهذا يكشف عادة سؤالين أو ثلاثة معيبة يستحق إصلاحها فورًا.

ثم وسّع باختبار كل ربع سنة. فهذا إيقاع يحتمله فريق صغير ويغطي بنكك خلال سنتين.

وسجّل ما تكتشفه من أنماط: إن تكرر عيب بعينه — بدائل قصيرة، أو صياغة سلبية، أو مصطلح غير وارد في المحتوى — فعالجه في قالب كتابة الأسئلة لا في كل سؤال على حدة.

وأخيرًا، اجعل التحليل جزءًا من دورة حياة السؤال لا مراجعة استثنائية: يُكتب السؤال، ويُراجع، ويُستخدم، وتُقرأ بياناته، ويُعدَّل أو يُبقى أو يُسحب. فالسؤال الذي يمر بهذه الدورة مرتين يصبح موثوقًا، والذي يُكتب ويُترك يبقى مجهول الدقة مهما بدا سليمًا على الورق.

حالة الأسئلة المعتمدة

الاختبارات التي تُبنى عليها شهادات معتمدة تحتاج تحليلًا أدق ودورية أعلى، لأن أثر السؤال المعيب فيها يتجاوز درجة إلى شهادة.

وأضف إلى المؤشرات الثلاثة: مراجعة دورية من لجنة مختصة، وتوثيق كل تعديل وتاريخه ومبرره، وسحب أي سؤال ثبت عيبه من الاحتساب بأثر رجعي إن لزم.

والبند الأخير قرار صعب ومطلوب: سؤال معيب أثّر على نتائج دفعة يستحق مراجعة درجاتهم. فتجاهله يحمي الإجراء ويظلم أشخاصًا.

وراجع ضوابط الجهة المانحة للاعتماد، فبعضها يشترط إجراءات محددة في مراجعة بنك الأسئلة وتوثيقها.