引導式測驗 · 中等 等級

人工智慧在律師考試測驗中的表現如何

測試統一律師考試的結構、對 GPT-4 90% 主張的批評,以及為什麼污染和評分選擇會影響 AI 分數。

問題 1 的 8

統一律師考試哪個部分有 200 個選擇題,佔總分的一半?

預覽每個問題8 問題

當您參加測驗時,就會出現答案和解釋。

  1. 統一律師考試哪個部分有 200 個選擇題,佔總分的一半?
    • 多狀態效能測試 (MPT)
    • 多州論文考試 (MEE)
    • 多州律師資格考試 (MBE)
    • 多州職業責任考試(MPRE)
  2. OpenAI 的 GPT-4 技術報告在 2023 年引用了哪些模擬統一律師考試分數?
    • 400 人中約有 298 人
    • 400 人中約有 250 人
    • 400 人中約有 350 人
    • 400 人中約有 198 人
  3. According to Eric Martínez's 2024 critique, why was GPT-4's 90th-percentile figure misleading?
    • 該模型在測試前已顯示答案
    • 與二月份的考生進行了比較,該組包括許多重複參加考試的人
    • 僅使用了效能測試部分
    • 對照組是法學教授,不是申請者
  4. 根據指南中描述的評論,誰對 2023 年模擬律師考試中 GPT-4 的作文答案進行了評分?
    • 經過 NCBE 官方訓練的棒材分級師
    • 州律師委員會
    • 研究者自己使用已發布的樣本答案
    • 第二個人工智慧模型作為自動評分機
  5. Bommarito 和 Katz 在 2022 年底在 MBE 練習題上測試 GPT-3.5 時發現了什麼?
    • 它正確回答了每個問題
    • 它拒絕回答法律問題
    • 它的得分低於隨機機會
    • 它回答了大約一半:高於機會,低於通過
  6. 為什麼訓練資料污染是 AI 律師考試結果的具體問題?
    • 過去的酒吧問題在網路上流傳,並且可能存在於模型的訓練資料中
    • 律師考試僅以印刷形式提供,因此模特兒無法閱讀它們
    • NCBE 故意發布錯誤答案
    • 禁止模特兒在訓練期間看到法律文本
  7. 為什麼模擬律師考試分數的研究人員必須近似從原始分數到比例分數的轉換?
    • 每年隨機選擇比例分數
    • 模型產生無法評分的答案
    • 每個司法管轄區使用一組完全不同的問題
    • NCBE 的完整等同流程並不公開
  8. 指南中說 NCBE 的 NextGen 律師考試比較重視什麼?
    • 記住更長的規則列表
    • 研究和起草等綜合技能
    • 選擇題的速度
    • 在評審團面前進行口頭辯論