خوارزمية نتائج امتحانات Ofqual

في عام 2020، قامت Ofqual ، وهي الجهة المنظمة للمؤهلات والامتحانات والاختبارات في إنجلترا، بوضع خوارزمية لتوحيد الدرجات لمكافحة تضخم الدرجات والحد من الدرجات التي يتوقعها المعلمون لمؤهلات المستوى A و GCSE في ذلك العام، بعد إلغاء الامتحانات كجزء من الاستجابة لجائحة COVID-19 .

في أواخر مارس 2020، أصدر غافين ويليامسون ، وزير الدولة للتعليم في حكومة بوريس جونسون المحافظة ، تعليماته إلى سالي كولير ، رئيسة هيئة تنظيم المؤهلات والامتحانات (Ofqual )، بضرورة "ضمان الحفاظ، قدر الإمكان، على معايير التأهيل وأن يتبع توزيع الدرجات نمطًا مشابهًا لما كان عليه في السنوات السابقة". وفي 31 مارس، أصدر توجيهًا بموجب قانون الأطفال والتعليم لعام 2009. ^{[ 1 ]}

ثم، في أغسطس، تم حساب 82% من درجات شهادة الثانوية العامة (A Level) باستخدام خوارزمية طورتها هيئة تنظيم المؤهلات والامتحانات (Ofqual). وقد تم منح أكثر من 4.6 مليون شهادة GCSE في إنجلترا - أي حوالي 97% من الإجمالي - بواسطة هذه الخوارزمية فقط. وقد أُخذت تقييمات المعلمين في الاعتبار، ولكن لم تُؤخذ الدرجات التي قيّمها المعلمون والتي قدمتها المدارس والكليات في الاعتبار. ^{[ 2 ]}

في 25 أغسطس، استقال كولير، الذي أشرف على تطوير خوارزمية ويليامسون الحسابية، من منصبه كرئيس هيئة تنظيم المؤهلات والامتحانات (Ofqual) بعد ضغوط متزايدة. ^{[ 3 ] [ 4 ]}

يعتمد نموذج تقييم أداء المراكز المباشر التابع لهيئة تنظيم المؤهلات والامتحانات (Ofqual) على سجل كل مركز (مدرسة أو كلية) في المادة قيد التقييم. ولم تُنشر تفاصيل الخوارزمية إلا بعد نتائج استخدامها الأول في أغسطس 2020، وحينها نُشرت جزئياً فقط. ^{[ 7 ]}

ملخص قدم مركز الامتحانات قائمة بالدرجات المتوقعة من قبل المعلمين، والتي تسمى "الدرجات التي تم تقييمها من قبل المركز" (CAGs). تم إدراج الطلاب حسب الترتيب التصاعدي دون وجود أي تعادل. للمجموعات الكبيرة (أكثر من 15) في حالة الامتحانات التي تضم عددًا كبيرًا من الطلاب، تم الرجوع إلى نتائج المركز السابقة. وتم تسجيل عدد الطلاب الحاصلين على كل تقدير (من A* إلى U) لكل عام من الأعوام الثلاثة السابقة، ثم تم حساب المتوسط ​​المئوي. ثم يتم تطبيق هذا التوزيع على طلاب السنة الحالية - بغض النظر عن مجموع درجاتهم الفردية. يمكن إجراء تعديل إضافي على التوحيد القياسي بناءً على البيانات التاريخية الشخصية السابقة: في المستوى A، يمكن أن تكون هذه نتيجة GCSE، وفي GCSE، يمكن أن تكون نتيجة اختبار SAT للمرحلة الأساسية الثانية . [ 8 ] للمجموعات الصغيرة، واختبارات اهتمامات الأقليات (أقل من 15 عامًا). يتم استخدام CAG الفردي دون تغيير [ 7 ]

الصيغ للمدارس الكبيرة مع${\displaystyle n\geq 15}$ ${\displaystyle P_{kj}=(1-r_{j})C_{kj}+r_{j}(C_{kj}+q_{kj}-p_{kj})}$ للمدارس الصغيرة مع${\displaystyle n<15}$ ${\displaystyle P_{kj}={\text{CAG}}}$ المتغيرات ${\displaystyle n}$عدد التلاميذ في المادة التي يتم تقييمها ${\displaystyle k}$هو مستوى دراسي محدد ${\displaystyle j}$يشير إلى المدرسة ${\displaystyle C_{kj}}$هذا هو التوزيع التاريخي للدرجات في المدرسة (المركز) على مدى السنوات الثلاث الماضية، 2017-2019. ${\displaystyle q_{kj}}$ يمثل هذا التوزيع المتوقع للدرجات بناءً على التحصيل الدراسي السابق للفصل في شهادة الثانوية العامة (GCSE). الفصل الذي يحصل معظم طلابه على الدرجة 9 (أعلى درجة) في شهادة الثانوية العامة سيحصل على الكثير من الدرجات A* المتوقعة؛ أما الفصل الذي يحصل معظم طلابه على الدرجة 1 في شهادة الثانوية العامة فسيحصل على الكثير من الدرجات U المتوقعة. ${\displaystyle p_{kj}}$يمثل هذا التوزيع المتوقع للدرجات في السنوات السابقة، بناءً على نتائج شهادة الثانوية العامة (GCSE). من المهم معرفة ذلك، لأنه إذا كان من المتوقع أن تكون نتائج السنوات السابقة ضعيفة، ثم كانت جيدة، فقد يكون هذا العام مماثلاً. ${\displaystyle r_{j}}$يمثل هذا النسبة المئوية للتلاميذ في الفصل الذين تتوفر بياناتهم التاريخية. إذا تمكنت من تتبع جميع نتائج شهادة الثانوية العامة (GCSE) بدقة، فإن النسبة تساوي 1؛ وإذا لم تتمكن من تتبع أي منها، فإن النسبة تساوي 0 . CAG هو التقييم المركزي. ${\displaystyle P_{kj}}$والنتيجة هي توزيع الدرجات لكل درجة${\displaystyle k}$في كل مدرسة${\displaystyle j}$.

لم يُطلب من المدارس فقط إصدار حكم عادل وموضوعي بشأن الدرجة التي اعتقدت أن الطالب سيحصل عليها، بل طُلب منها أيضًا ترتيب الطلاب ضمن كل درجة . ويعود ذلك إلى أن عملية التقييس الإحصائي تتطلب معلومات أكثر تفصيلًا من مجرد الدرجة. ^{[ 9 ]} وقد أصدرت بعض هيئات الامتحانات إرشادات حول آلية إصدار الحكم لاستخدامها في المراكز التي يُدرّس فيها عدة معلمين مادةً ما. ^{[ 10 ]} وكان من المقرر تقديم هذه الإرشادات في 29 مايو 2020.

بالنسبة لطلاب شهادة الثانوية العامة (A-level)، كانت مدارسهم قد أدرجت بالفعل الدرجة المتوقعة ضمن مرجع طلب الالتحاق بالجامعة عبر نظام UCAS . ^{[ 11 ]} وقد تم تقديم هذا المرجع بحلول 15 يناير (15 أكتوبر 2019 لجامعتي أكسفورد وكامبريدج وكليات الطب) وتمت مشاركته مع الطلاب. وتجدر الإشارة إلى أن الدرجة المتوقعة من UCAS تختلف عن الدرجة المتوقعة من Ofqual.

الطريقة المعتادة لاختبار خوارزمية تنبؤية هي تشغيلها على بيانات العام السابق، لكن هذا لم يكن ممكناً لعدم جمع بيانات ترتيب المعلمين في السنوات السابقة. بدلاً من ذلك، استخدمت الاختبارات الترتيب الذي ظهر من النتائج النهائية لعام 2019. ^{[ 7 ]}

أُعلنت نتائج امتحانات المستوى المتقدم (A-level) في إنجلترا وويلز وأيرلندا الشمالية في 13 أغسطس 2020. وكانت نسبة 36% من النتائج أقل من تقييمات المعلمين (CAG)، بينما انخفضت نسبة 3% منها درجتين. ^{[ 12 ]}

قد يحصل الطلاب في المدارس الصغيرة أو الذين يدرسون موادًا خاصة بالأقليات، كما هو الحال في المدارس الخاصة الصغيرة (والتي غالبًا ما يكون عدد طلابها أقل حتى في المواد الشائعة)، على درجات أعلى من توقعات معلميهم، خاصةً إذا كانوا ضمن فئة الطلاب ذوي الاهتمامات الخاصة بالأقليات أو الذين يدرسون موادًا خاصة بالأقليات. عادةً ما يكون نطاق درجات هؤلاء الطلاب أضيق، حيث يُطلب من الطلاب الأضعف مغادرة المدرسة. أما الطلاب في المدارس الحكومية الكبيرة، وكليات المرحلة الثانوية، وكليات التعليم الإضافي التي تتبنى سياسات القبول المفتوح والتي دأبت تاريخيًا على تعليم الطلاب من الأقليات العرقية والإثنية أو الطلاب ذوي الاحتياجات الخاصة، فقد شهدت نتائجهم انخفاضًا حادًا، وذلك لتتوافق مع منحنى التوزيع التاريخي. ^{[ 7 ]}

وجد الطلاب النظام غير عادل، وتعرض ويليامسون لضغوط لتوضيح النتائج والتراجع عن قراره باستخدام الخوارزمية التي كان قد كلف بتطويرها ونفذتها هيئة تنظيم المؤهلات والامتحانات (Ofqual). ^{[ 13 ]} في 12 أغسطس، أعلن ويليامسون عن "آلية ثلاثية" تتيح للطلاب الطعن في النتيجة باستخدام نتيجة تجريبية صالحة غير محددة. ^{[ 14 ]} ولكن في 15 أغسطس، نُشرت التوجيهات مع ثمانية شروط تختلف عن بيان الوزير. ^{[ 15 ]} بعد ساعات من الإعلان، علقت هيئة تنظيم المؤهلات والامتحانات (Ofqual) العمل بالنظام. ^{[ 16 ]} في 17 أغسطس، وافقت الهيئة على منح الطلاب تقدير CAG، بدلاً من التقدير الذي تنبأت به الخوارزمية. ^{[ 13 ]}

أعلنت هيئة القبول في الجامعات والكليات (UCAS) في 19 أغسطس/آب أن 15 ألف طالب رُفضوا من جامعاتهم المفضلة بناءً على الدرجات التي تم توليدها بواسطة خوارزمية. بعد قرار هيئة تنظيم المؤهلات والامتحانات (Ofqual) باستخدام توقعات المعلمين غير المُراجعة، حصل العديد من الطلاب المتضررين على درجات تُلبي شروط القبول، فأعادوا تقديم طلباتهم. وأفاد 90% منهم أنهم يطمحون للدراسة في جامعات مرموقة. ونتيجةً لذلك، بدت الجامعات المرموقة وكأنها تُعاني من نقص في الطاقة الاستيعابية. ^{[ 1 ] [ 13 ]}

أعلنت الجمعية الإحصائية الملكية أنها عرضت المساعدة في بناء الخوارزمية، لكنها سحبت عرضها بعد اطلاعها على طبيعة اتفاقية عدم الإفصاح التي كان سيُطلب منها توقيعها. ولم تكن هيئة تنظيم المؤهلات والامتحانات (Ofqual) مستعدة لمناقشة الأمر، وتأخرت في الرد لمدة 55 يومًا. ^{[ 17 ]}

أبدى اللورد فالكونر ، المدعي العام السابق ، رأيه بأن ثلاثة قوانين قد تم انتهاكها، وقدم مثالاً على تجاهل هيئة تنظيم المؤهلات والامتحانات (Ofqual) لتعليمات مباشرة من وزير الدولة للتعليم. ^{[ 18 ]}

قال فالكونر إن صيغة توحيد الدرجات تُخالف الأهداف العامة التي أُنشئت بموجبها هيئة تنظيم المؤهلات والامتحانات (Ofqual) بموجب قانون التدريب المهني والمهارات والأطفال والتعليم لعام 2009. وتنص هذه الأهداف على أن يُعطي نظام الدرجات مؤشرًا موثوقًا على معارف الطالب ومهاراته وفهمه ، وأن يسمح بإجراء مقارنات موثوقة مع الطلاب الذين يخضعون لامتحانات تُقيّمها هيئات أخرى، ومع الطلاب الذين خضعوا لامتحانات مماثلة في السنوات السابقة. ^{[ 2 ] [ 18 ]}

أشار حزب العمال إلى أن العملية غير قانونية لعدم منح الطلاب أي آلية للاستئناف، ^{[ 18 ] [ 2 ]} مصرحاً: "سيكون هناك آثار تمييزية واسعة النطاق من خلال تطبيق العملية على أساس عكس نتائج السنوات السابقة من مؤسساتهم"، و"من المؤكد أنها ستضر بمجموعة كاملة من الفئات ذات الخصائص المحمية، في انتهاك لمجموعة من تشريعات مكافحة التمييز". ^{[ 18 ]}

• جدل حول نتائج امتحانات المدارس في المملكة المتحدة لعام 2020

• متطلبات حساب النتائج في صيف 2020 - هيئة المؤهلات والامتحانات (Ofqual)، 7 يوليو 2020، تم التحديث في 20 أغسطس
• دليل الطالب لنتائج مؤهلات ما بعد المرحلة الثانوية: صيف 2020 - هيئة المؤهلات والامتحانات (Ofqual)، 27 يوليو 2020، تم التحديث في 19 أغسطس
• إجراء الامتحانات خلال تفشي فيروس كورونا (كوفيد-19) - إرشادات من وزارة التعليم، نُشرت في 20 مارس 2020، وتم تحديثها في 27 أغسطس
• مناقشة خوارزمية معهد سياسات التعليم العالي، مايو 2020
• لجنة التعليم - شهادة شفهية: تأثير كوفيد-19 على التعليم وخدمات الأطفال، HC 254 الأربعاء 2 سبتمبر 2020