РУКОВОДСТВО ПО ПРИМЕНЕНИЮ

Оценка и обратная связь с помощью искусственного интеллекта для учителей

Выставление оценок и обратная связь с помощью ИИ означает использование ИИ для составления комментариев на основе рубрик и предлагаемых оценок за работы учащихся, которые учитель просматривает, редактирует и утверждает.

Прослушайте это руководствоОзвучено ИИ · ~3 min

На этой странице4 минуты чтения
  1. Обзор
  2. Глубокое погружение
  3. Реальная реализация
  4. Будущее AI-оценки и обратной связи для учителей
  5. Применение на практике
  6. Продолжайте исследовать
  7. Часто задаваемые вопросы

Обзор

Это важно, поскольку обратная связь — одна из самых трудоемких частей обучения, а оценка ИИ может быть непоследовательной или предвзятой, поэтому окончательные решения должен оставаться за учителем.

Глубокое погружение

ИИ может помочь в двух разных задачах: писать отзывы и предлагать оценки. Составление обратной связи более безопасно и полезно. Учитывая четкую рубрику и часть студенческой работы, модель может создавать конкретные комментарии, привязанные к каждому критерию, быстрее, чем большинство людей могут их напечатать. Начисление баллов более рискованно, поскольку число попадает в журнал оценок и напрямую влияет на учащихся. Хорошо известны некоторые проблемы с точностью. Результаты могут меняться между прогонами одного и того же эссе. Модели могут вознаграждать за длину и отточенный словарный запас больше, чем за рассуждения. Их можно поколебать уверенным тоном. И они могут придумывать доказательства, хваля или критикуя предложения, которых нет в работе ученика. Структурированные подсказки и обзор учителя улавливают большую часть этого, но не в том случае, если учитель только бегло просматривает. Справедливость – это отдельная тема. Письмо, написанное изучающими английский язык, или на диалектах, отличных от стандартного академического английского, может оцениваться более строго по поверхностным особенностям. Детекторы записи ИИ — это похожая ловушка. Они ненадежны, и исследования показали, что некоторые детекторы непропорционально часто выявляют писателей, не являющихся носителями английского языка. Результаты детектора не должны быть основанием для обвинения. Некоторые инструменты оценки используют более ограниченный ИИ. Например, Gradescope может группировать похожие ответы, чтобы учитель оценивал каждую группу один раз. Учитель по-прежнему определяет оценку, а сортировку осуществляет ИИ. Конфиденциальность также применяется. Студенческая работа является частью учебного процесса. В Соединенных Штатах порядок действий регулируется FERPA, поэтому используйте одобренные округом инструменты и удаляйте имена там, где это возможно. Основное заблуждение заключается в том, что оценка ИИ является объективной, поскольку она автоматизирована. Он применяет закономерности, извлеченные из данных, включая предвзятость этих данных. Работоспособная модель — это ИИ для черновиков, учитель для принятия решений и честность с учениками в отношении того, как была получена обратная связь. Лучше всего это работает для частой формирующей обратной связи с низкой ставкой, а не для итоговых оценок.

Реальная реализация

Учитель английского языка дает ассистенту рубрику аргумента-эссе с четырьмя критериями и одно анонимное эссе, затем просит указать две сильные стороны и один следующий шаг для каждого критерия, используя короткую цитату из эссе в качестве доказательства.

Учитель физики использует платформу выставления оценок, которая группирует похожие ответы на вопрос с коротким ответом, поэтому вся группа может получить одинаковую оценку и комментарий сразу после того, как учитель просмотрит их.

Учитель запускает набор черновиков класса через ИИ только для формирующей обратной связи, читает каждый комментарий перед его публикацией и удаляет тот, в котором хвалилась цитата, которую ученик никогда не писал.

Кафедра выполняет калибровку, заставляя ИИ оценивать пять опорных работ, которые уже оценили преподаватели, затем сравнивает оценки ИИ с согласованными оценками, прежде чем решить, использовать ли их для обратной связи.

Будущее AI-оценки и обратной связи для учителей

Платформы обучения встраивают обратную связь с ИИ в рабочие процессы выполнения заданий, и все больше округов, скорее всего, будут публиковать правила о том, когда ИИ может предлагать оценки и что необходимо раскрывать учащимся и их семьям. Более совершенные инструменты калибровки и обратная связь, основанная на фактических данных, могут уменьшить некоторые проблемы с точностью, но вопросы о предвзятости и подотчетности не исчезнут только благодаря техническим исправлениям. Наиболее оправданным направлением является более частая и быстрая формирующая обратная связь, при которой учителя сохраняют власть над оценками. Независимые исследования воздействия на различные группы студентов будут иметь большее значение, чем заявления поставщиков.

Применение на практике

Почему это важно

  • Выбор сборки. Проектирование на уровне приложения определяет, улучшит ли ИИ реальные результаты.
  • Команда и рабочий процесс. Хорошая интеграция рабочих процессов обеспечивает повышение производительности, которому пользователи могут доверять.
  • Риски и безопасность. Хорошо продуманные варианты использования снижают усталость от изменений и риск внедрения.

Следите за

  • Автоматизация сломанного процесса может усугубить существующие проблемы.
  • Команды могут чрезмерно автоматизировать и исключить необходимое человеческое суждение.
  • Качество может ухудшиться, если результаты не будут оцениваться постоянно.

Следующие шаги

  1. Составьте карту текущего рабочего процесса и определите этап, вызывающий наибольшие затруднения.
  2. Определите человеческие контрольно-пропускные пункты перед полной автоматизацией.
  3. Обучайте пользователей подсказкам, путям эскалации и стандартам качества.
  4. Отслеживайте результаты на уровне задач, чтобы подтвердить устойчивую ценность.

Продолжайте исследовать

Бесплатная рассылка

Получайте ежедневный AI-обзор

Три проверенных AI-истории каждое утро буднего дня, написанные простым английским. Бесплатно навсегда, без рекламы.

Одно электронное письмо каждый будний день. Отписаться в один клик. Мы никогда не продаем и не передаем ваш адрес.

Проверьте себя

Take the AI Grading and Feedback for Teachers quiz

Мгновенная обратная связь по каждому ответу и общий сертификат с проверяемым идентификатором после прохождения курса.

Начать тест

Поддержите бесплатное образование в области искусственного интеллекта. AI Understanding — это некоммерческая организация 501(c)(3). Никакой рекламы и платного доступа. Сделать пожертвование

Часто задаваемые вопросы

Что такое ИИ-оценка и обратная связь для учителей?

Выставление оценок и обратная связь с помощью ИИ означает использование ИИ для составления комментариев на основе рубрик и предлагаемых оценок за работы учащихся, которые учитель просматривает, редактирует и утверждает. Это важно, поскольку обратная связь — одна из самых трудоемких частей обучения, а оценка ИИ может быть непоследовательной или предвзятой, поэтому окончательные решения должен оставаться за учителем.

Согласно руководству, какая работа по оценке ИИ безопаснее и полезнее?

Составление обратной связи сопряжено с меньшим риском, чем выставление оценок, что напрямую влияет на журнал оценок.

Какая проблема с точностью связана с тем, что ИИ хвалит предложения, которых нет в работе учащегося?

Модели могут придумывать цитаты, поэтому важно сверять цитируемые доказательства с представленными.

Что говорит руководство о детекторах записи ИИ?

Исследования выявили предвзятое отношение к писателям-иностранцам, поэтому оценка детектора не должна служить основанием для обвинений.

Как работает функция группировки ответов Gradescope, как описано в руководстве?

ИИ сортирует ответы, а учитель выставляет балл каждой группе.

Какая автоматическая проверка выявляет выдуманные доказательства в отзывах ИИ?

Если модель должна цитировать доказательства, каждую цитату можно сверить с текстом учащегося.

Продолжайте учиться

Связанные руководства

Другие руководства, выбранные по этой теме

Получите бесплатный AI-сертификатКороткий бесплатный курс и экзамен. Без стоимости, без карты. Около 2,5 часов.Начать бесплатно →