Alkalmazási ÚTMUTATÓ

AI minősítés és visszajelzés tanároknak

A mesterséges intelligencia osztályozása és visszajelzése azt jelenti, hogy az AI-t használjuk rubrikán alapuló megjegyzések és javasolt pontszámok megfogalmazására a tanulói munkára vonatkozóan, amelyeket a tanár felülvizsgál, szerkeszt és jóváhagy.

Hallgassa meg ezt az útmutatótAI-narrált · ~3 min

Ezen az oldalon4 perc olvasás
  1. Áttekintés
  2. Mély merülés
  3. Valós megvalósítás
  4. Az AI osztályozás jövője és visszajelzés tanároknak
  5. A gyakorlatba ültetés
  6. Folytassa a felfedezést
  7. Gyakran ismételt kérdések

Áttekintés

Ez azért fontos, mert a visszajelzés az egyik legidőigényesebb része a tanításnak, de az AI pontozása következetlen vagy elfogult lehet, ezért a tanárnak kell a végső döntéshozónak maradnia.

Mély merülés

A mesterséges intelligencia két különböző munkában segíthet: visszajelzés írása és pontszámok javaslata. A visszajelzések megfogalmazása a biztonságosabb és hasznosabb. Egy világos rubrikával és egy tanulói munkával a modell gyorsabban képes konkrét megjegyzéseket készíteni az egyes feltételekhez kötötten, mint ahogy a legtöbb ember beírná. A pontozás kockázatosabb, mert egy szám bekerül az osztályzatba, és közvetlenül érinti a tanulókat. Számos pontossági probléma ismert. A pontszámok változhatnak ugyanazon esszé futtatásai között. A modellek a hosszúságot és a csiszolt szókincset jutalmazhatják az érveléssel szemben. Megingathatja őket a magabiztos hangnem. És kitalálhatnak bizonyítékokat, dicsérő vagy kritizáló mondatokat, amelyek nem szerepelnek a hallgató munkájában. A strukturált felszólítások és a tanári áttekintés ennek nagy részét felfogják, de nem, ha a tanár csak átfut. A méltányosság külön kérdés. Az angoltanulók által írt vagy a szokásos tudományos angol nyelvtől eltérő dialektusok írása a felszíni jellemzők alapján szigorúbban ítélhető meg. Az AI írásdetektorok egy kapcsolódó csapda. Megbízhatatlanok, és a kutatások azt találták, hogy egyes detektorok aránytalanul megjelölik a nem anyanyelvű angol írókat. A detektor pontszáma nem lehet a vád alapja. Egyes osztályozóeszközök korlátozottabb mesterséges intelligenciát használnak. A Gradescope például csoportosíthatja a hasonló válaszokat, így a tanár minden csoportot egyszer osztályoz. A pontszámot továbbra is a tanár dönti el, a válogatást pedig az MI intézi. Az adatvédelem is érvényes. A tanulói munka az oktatási nyilvántartás része. Az Egyesült Államokban a FERPA szabályozza a kezelés módját, ezért használjon a körzet által jóváhagyott eszközöket, és távolítsa el a neveket, ahol csak tudja. A fő tévhit az, hogy az AI minősítés objektív, mert automatizált. Az adatokból tanult mintákat alkalmazza, beleértve az adatok torzításait is. A működőképes modell a mesterséges intelligencia a piszkozatokhoz, a tanár a döntésekhez és a diákokkal való őszinteség a visszajelzések létrehozásával kapcsolatban. Ez a legjobb a gyakori, alacsony tétű formatív visszajelzéseknél, nem pedig a végső osztályzatoknál.

Valós megvalósítás

Egy angoltanár ad egy asszisztensnek egy négy kritériumból álló érvelési esszét és egy anonimizált esszét, majd mindegyik kritériumhoz két erősséget és egy következő lépést kér, bizonyítékként egy rövid idézetet az esszéből.

A fizikatanárok olyan osztályozó platformot használnak, amely hasonló válaszokat csoportosít egy rövid válaszú kérdésre, így egy egész csoport ugyanazt a pontszámot kaphatja, és egyszerre megjegyzést tud adni, miután a tanár átnézi azt.

A tanár a mesterséges intelligencia segítségével egy osztályvázlatot futtat le, csak formatív visszajelzés céljából, minden megjegyzést elolvas, mielőtt közzéteszi, és töröl egy olyan megjegyzést, amely egy olyan idézetet dicsér, amelyet a diák soha nem írt.

A tanszék úgy kalibrálja, hogy a mesterséges intelligencia öt, a tanárok által már értékelt alapdolgozatot lepontoz, majd összehasonlítja az AI-pontszámokat a megállapodás szerinti pontszámokkal, mielőtt eldönti, hogy használja-e a visszajelzési vázlatokhoz.

Az AI osztályozás jövője és visszajelzés tanároknak

A tanulási platformok a mesterséges intelligencia visszajelzését építik be a feladatok munkafolyamataiba, és valószínűleg több körzet is közzétesz majd szabályokat arról, hogy az AI mikor javasolhat pontszámokat, és mit kell közölni a diákokkal és a családokkal. A jobb kalibrációs eszközök és a bizonyítékokhoz kötött visszajelzések csökkenthetnek bizonyos pontossági problémákat, de az elfogultsággal és az elszámoltathatósággal kapcsolatos kérdések nem tűnnek el pusztán a technikai javítások révén. A legvédhetőbb irány a gyakoribb, gyorsabb formáló visszajelzés, ahol a tanárok tartják fenn az osztályzatok feletti tekintélyt. A különböző hallgatói csoportokra gyakorolt ​​hatások független kutatása többet számít, mint az eladók állításai.

A gyakorlatba ültetés

Miért számít

  • Építési lehetőségek. Az alkalmazásszintű tervezés határozza meg, hogy az AI javítja-e a valós eredményeket.
  • Csapat és munkafolyamat. A jó munkafolyamat-integráció olyan termelékenységnövekedést eredményez, amelyben a felhasználók megbízhatnak.
  • Kockázat és biztonság. A jól körülhatárolt felhasználási esetek csökkentik a változtatások fáradtságát és a végrehajtás kockázatát.

Vigyázz

  • Egy megszakadt folyamat automatizálása felerősítheti a meglévő problémákat.
  • A csapatok túlautomatizálhatják és eltávolíthatják a szükséges emberi ítélőképességet.
  • A minőség sodródhat, ha a kimeneteket nem értékelik folyamatosan.

Következő lépések

  1. Térképezze fel az aktuális munkafolyamatot, és határozza meg a legnagyobb súrlódású lépést.
  2. Emberi ellenőrzőpontok meghatározása a teljes automatizálás előtt.
  3. Tanítsa meg a felhasználókat az utasításokról, az eszkalációs utakról és a minőségi szabványokról.
  4. Kövesse nyomon a feladat szintű eredményeket a tartós érték megerősítéséhez.

Folytassa a felfedezést

Ingyenes hírlevél

Szerezze meg a napi AI összefoglalót

Minden hétköznap reggel három ellenőrzött AI történet, egyszerű angol nyelven. Örökké ingyen, hirdetések nélkül.

Minden hétköznap egy e-mail. Egy kattintással lemondhat. Soha nem értékesítjük vagy osztjuk meg az Ön címét.

Teszteld magad

Take the AI Grading and Feedback for Teachers quiz

Azonnali visszajelzés minden válaszra, és megosztható tanúsítvány egy ellenőrizhető azonosítóval, miután sikeresen teljesít egy kurzust.

Kezdő kvíz

Támogassa az ingyenes AI oktatást. AI Understanding egy 501(c)(3) nonprofit – nincs hirdetés, nincs fizetőfal, soha. Tegyen adományt

Gyakran ismételt kérdések

Mi az a mesterséges intelligencia osztályozása és visszajelzése a tanároknak?

A mesterséges intelligencia osztályozása és visszajelzése azt jelenti, hogy az AI-t használjuk rubrikán alapuló megjegyzések és javasolt pontszámok megfogalmazására a tanulói munkára vonatkozóan, amelyeket a tanár felülvizsgál, szerkeszt és jóváhagy. Ez azért fontos, mert a visszajelzés az egyik legidőigényesebb része a tanításnak, de az AI pontozása következetlen vagy elfogult lehet, ezért a tanárnak kell a végső döntéshozónak maradnia.

Az útmutató szerint melyik mesterséges intelligencia osztályozási munka biztonságosabb és hasznosabb?

A visszajelzés megfogalmazása kisebb kockázatot jelent, mint a pontozás, ami közvetlenül befolyásolja az osztályzatot.

Melyik pontossági probléma az, hogy a mesterséges intelligencia dicsérő mondatai nem szerepelnek a tanuló munkájában?

A modellek idézeteket tudnak kitalálni, ezért fontos az idézett bizonyítékok összevetése a benyújtással.

Mit mond az útmutató az AI írásdetektorokról?

A kutatások elfogultságot találtak a nem bennszülött írókkal szemben, ezért a detektor pontszáma nem lehet vád alapja.

Hogyan működik a Gradescope válaszcsoportosítási funkciója az útmutatóban leírtak szerint?

Az AI rendezi a válaszokat, és a tanár dönti el az egyes csoportok pontszámát.

Milyen automatizált ellenőrzések rögzítik a feltalált bizonyítékokat a mesterséges intelligencia visszajelzéseiben?

Ha a modellnek bizonyítékot kell idéznie, minden idézet összevethető a tanuló szövegével.