PANDUAN Masyarakat

Fiasco Algoritma Penilaian A-Level UK

Apabila COVID-19 membatalkan peperiksaan musim panas di England pada tahun 2020, Ofqual menggunakan proses penyeragaman statistik untuk menganugerahkan gred daripada penilaian guru dan susunan kedudukan.

Dengar panduan iniAI-diceritakan · ~3 min

Pada halaman ini3 min dibaca
  1. Gambaran keseluruhan
  2. Menyelam dalam
  3. Pelaksanaan Dunia Sebenar
  4. Masa Depan Fiasco Algoritma Penilaian A-Level UK
  5. Mempraktikkannya
  6. Teruskan Meneroka
  7. Soalan lazim

Gambaran keseluruhan

Pada 17 Ogos, kerajaan dan Ofqual mengumumkan bahawa pelajar akan menerima CAG mereka, manakala mana-mana gred dikira yang lebih tinggi akan kekal. Episod itu melibatkan perkiraan A-level dan GCSE England, bukan satu model seragam di seluruh United Kingdom.

Menyelam dalam

With exams cancelled, teachers provided a centre assessment grade for each student and a within-subject rank order. Ofqual sought comparable outcomes and was directed to avoid an uncontrolled rise in results relative to previous years. The statistical standardisation process used historical centre outcomes and information about students’ prior attainment, with rank order helping place candidates within the distribution. The model was not a neural network scoring exam scripts; it was a statistical procedure designed for the emergency. Ofqual’s technical materials treated small cohorts differently because there was less statistical evidence to rely on, blending centre assessment information and statistical evidence on a sliding scale. It is inaccurate to say every small class was completely exempt or that this rule automatically protected every independent school. Institution size, subject entry and historical data interacted. Initial calculated results were issued in England on 13 August 2020. Ofqual’s later analysis found that about 39% of A-level entries had a calculated grade below the CAG, about 2% had a higher calculated grade, and 59% matched; percentages are rounded. Separately, Ofqual reported that 96.4% of initial A-level grades were the same as or within one grade of CAGs. These are entry-level comparisons, not a count of students who failed. After concerns over anomalies and public confidence, on 17 August government and Ofqual announced that students would receive their centre assessment grades for GCSE, AS and A levels. Under the announcement, students received their CAGs, but a calculated grade that was higher remained in place. The final result was not always the CAG. This case is useful for understanding group-level standardisation versus individual evidence. A model can match a distribution target while failing to represent what a particular student would have demonstrated in an exam. The controversy also illustrates how public legitimacy, appeals and school-level historical patterns matter when high-stakes scores are assigned.

Pelaksanaan Dunia Sebenar

Seorang pelajar membandingkan CAG yang dinilai oleh guru yang dikemukakan untuk subjek mereka dengan gred dikira permulaan yang dikeluarkan pada 13 Ogos.

Sebuah sekolah meneliti cara keputusan lepas dan saiz kohort mempengaruhi penyeragaman untuk kumpulan subjek tertentu.

Seorang wartawan membezakan proses Ofqual England daripada pihak berkuasa kelayakan berasingan di Scotland, Wales dan Ireland Utara.

Seorang penyelidik pendidikan melaporkan bahawa objektif peringkat kohort model permulaan tidak dapat menentukan prestasi peperiksaan individu pelajar yang tidak kelihatan.

Masa Depan Fiasco Algoritma Penilaian A-Level UK

Ofqual kembali kepada peperiksaan selepas tempoh kecemasan, tetapi tindak balas 2020 kekal sebagai pengajaran tentang ketidakpastian, objektif pemodelan dan mekanisme semakan. Episod itu adalah khusus untuk pengawal selia kelayakan England; negara UK yang lain membuat keputusan secara berasingan. Apabila menggunakan nombor, kenal pasti sama ada ia merujuk kepada gred dikira permulaan, gred akhir selepas 17 Ogos, pelajar atau kemasukan gred. Rujuk laporan teknikal dan penilaian Ofqual daripada mengulangi tajuk utama ringkas "algoritma menurunkan taraf 40%". Penilaian 2021 berguna untuk memahami cara gred pusat disemak kemudian, tetapi ia tidak mengubah pembalikan Ogos 2020 yang didokumenkan.

Mempraktikkannya

Mengapa ia penting

  • Risiko dan keselamatan. Kemudaratan AI malapetaka dan setiap hari bergantung pada siapa yang memahami risiko dan siapa yang boleh bertindak.
  • Keputusan yang lebih jelas. Celik awam dan profesional membentuk sama ada dasar keselamatan yang kukuh adalah mungkin dari segi politik.
  • Memotong keterujaan. Penjelasan yang jelas mengurangkan tangkapan oleh gembar-gembur, PR makmal dan teater etika yang tidak jelas.

Berhati-hati untuk

  • Merawat risiko kewujudan sebagai sci-fi manakala sebatian keupayaan.
  • Mengelirukan keselamatan produk permukaan dengan penjajaran di bawah autonomi tinggi.
  • Meninggalkan khalayak bukan Inggeris dan bukan pakar dengan hanya sumber berkualiti rendah.

Langkah seterusnya

  1. Asingkan bahaya produk, penyalahgunaan dan kehilangan kawalan / risiko salah jajaran.
  2. Tanya apakah bukti yang akan mengubah pandangan anda tentang garis masa dan keterukan.
  3. Lebih suka sumber utama dan penilaian konkrit berbanding tuntutan pemasaran.
  4. Kenal pasti satu laluan tindakan: kerjaya, dasar, pembiayaan atau kemahiran — bukan sahaja kesedaran.

Teruskan Meneroka

Newsletter percuma

Dapatkan taklimat AI harian

Tiga cerita AI yang disahkan setiap pagi hari bekerja, ditulis dalam Bahasa Inggeris biasa. Percuma selamanya, tiada iklan.

Satu e-mel setiap hari bekerja. Berhenti melanggan dalam satu klik. Kami tidak pernah menjual atau berkongsi alamat anda.

Uji diri anda

Ambil kuiz Fiasco Algoritma Penilaian A-Level UK

Maklum balas segera pada setiap jawapan, dan sijil yang boleh dikongsi dengan ID yang boleh disahkan sebaik sahaja anda lulus kursus.

Mulakan kuiz

Sokong pendidikan AI percuma. AI Understanding ialah pertubuhan bukan keuntungan 501(c)(3) — tiada iklan, tiada bayaran dinding, selamanya. Buat derma

Soalan lazim

Apakah itu Fiasco Algoritma Penilaian A-Level UK?

Apabila COVID-19 membatalkan peperiksaan musim panas di England pada tahun 2020, Ofqual menggunakan proses penyeragaman statistik untuk menganugerahkan gred daripada penilaian guru dan susunan kedudukan. Pada 17 Ogos, kerajaan dan Ofqual mengumumkan bahawa pelajar akan menerima CAG mereka, manakala mana-mana gred dikira yang lebih tinggi akan kekal. Episod itu melibatkan perkiraan A-level dan GCSE England, bukan satu model seragam di seluruh United Kingdom.

Apakah maklumat yang disediakan oleh pusat untuk proses penyeragaman Ofqual 2020?

Ofqual’s materials describe centre-assessed grades and students’ rank orders as inputs to standardisation.

Apakah peranan utama susunan kedudukan guru?

Susunan kedudukan memberikan kedudukan relatif di kalangan pelajar di pusat dalam subjek yang berkaitan.

Bagaimanakah model itu mengambil kira kemasukan subjek yang kecil?

Ofqual menyifatkan pendekatan skala gelongsor kerana bukti statistik kurang boleh dipertahankan untuk kohort kecil.

Berapakah peratusan kemasukan A-level permulaan di England yang mempunyai gred dikira di bawah CAG?

Analisis peringkat kemasukan kemudian Ofqual mendapati kira-kira 39% gred A-level dikira adalah di bawah CAG, kira-kira 2% di atas dan 59% adalah sama, dengan angka dibundarkan.

Apakah yang diumumkan oleh kerajaan pada 17 Ogos 2020 untuk keputusan GCSE, AS dan A-level England?

Pengumuman 17 Ogos menyatakan pelajar akan menerima CAG mereka; jika gred yang dikira lebih tinggi, ia akan dipertahankan. Oleh itu, CAG tidak selalu menjadi keputusan akhir.