引導式測驗 · 硬 等級

如何使用 AI 测验创建评分标准和测验

测试编写可观察的评分标准、基于误解的干扰因素以及使用项目分析来捕获错误的人工智能答案键。

問題 1 的 8

分析式評分標準(analytic rubric)與整體式評分標準(holistic rubric)有何不同?

預覽每個問題8 問題

當您參加測驗時,就會出現答案和解釋。

  1. 分析式評分標準(analytic rubric)與整體式評分標準(holistic rubric)有何不同?
    • 分析式評分標準由 AI 撰寫,整體式評分標準由教師撰寫
    • 分析式評分標準只給出一個總體分數
    • 分析式評分標準針對不同標準在多個層級進行評分
    • 分析式評分標準完全沒有層級
  2. 哪種評分標準描述最有可能讓兩位評分者給出相同分數?
    • 每個論點至少有一個相關且具引用的來源支持
    • 展現良好的證據使用能力
    • 展現優異的研究技巧
    • 以強勁且有效的方式使用證據
  3. 什麼樣的是好的選擇題干擾項(distractor)?
    • 它明顯錯誤,所以不會讓任何人困惑
    • 它是選項中最長的
    • 它是「以上皆是」
    • 它會誘惑持有真實迷思的學生,但不會誘惑理解正確的學生
  4. 為什麼指南建議打亂 AI 撰寫題目的選項順序?
    • 打亂會使題目變得更難
    • 模型可能比隨機機率更常將正確答案放在同一個位置
    • 學習管理系統要求隨機順序
    • 打亂可以修正錯誤的答案鍵
  5. 讓模型在新的對話中(沒有答案鍵)回答自己提的題目,目的是什麼?
    • 找出與答案鍵不一致的地方,以指出錯誤的答案鍵或含糊的題目
    • 讓模型記住答案
    • 讓題目變得更難
    • 自動產生更多錯誤選項
  6. 某題的難度指數(p 值)為 0.95,這代表什麼意思?
    • 95% 的學生選了同一個錯誤答案
    • 這題非常難
    • 約 95% 的學生答對了
    • 這題能完美區分不同水平的學生
  7. 某題的鑑別指數為負值,這通常代表什麼?
    • 題目撰寫良好,應予以保留
    • 答案鍵錯誤或題目有歧義
    • 參加考試的學生人數太少
    • 題目太簡單
  8. 干擾項分析顯示沒有學生選擇 C 選項,你應該怎麼做?
    • 將 C 選項設為正確答案
    • 刪除整道題目
    • 什麼都不用做,因為這是理想的狀態
    • 重寫 C 選項,因為它沒有發揮作用