引導式測驗 · 中等 等級

自玩微調測驗

探索圍棋中的自我對弈和語言模型訓練,將 AlphaGo Zero 與 AlphaZero 進行比較,並檢查固定資料訊號和合成資料風險。

相關引導路徑自玩微調
問題 1 的 8

哪個著名的系統僅通過自我對弈而沒有人類對局記錄就達到了超人的圍棋水平?

預覽每個問題8 問題

當您參加測驗時,就會出現答案和解釋。

  1. 哪個著名的系統僅通過自我對弈而沒有人類對局記錄就達到了超人的圍棋水平?
    • 阿爾法狗零式
    • 深藍
    • 華森
    • GPT-2
  2. 在SPIN中,模型必須擊敗的「對手」扮演什麼角色?
    • 單獨的人工訓練獎勵模型
    • 模型自己的先前檢查點及其產生的反應
    • 隨機文字產生器
    • 分詞器
  3. 自對弈微調的主要資料效率優勢是什麼?
    • 每輪都需要一個全新的人類資料集
    • 它僅適用於無限數據
    • 它可以從固定資料集中提取更多收益,而無需新的人工標籤
    • 它根本不需要模型
  4. 在SPIN的訓練目標中,模型被推動做什麼?
    • 喜歡自己產生的答案而不是人類參考
    • 忽略所有人類數據
    • 記住測試集
    • 為人類參考響應分配比其先前輸出更高的可能性
  5. Which pair of games did the AlphaZero paper demonstrate beyond its Go experiments?
    • Chess and shogi
    • Poker and bridge
    • Checkers and Othello
    • Atari and StarCraft
  6. What risk did researchers report when language models are recursively trained on generated data?
    • Model collapse, with loss of diversity and representation of the original distribution
    • Guaranteed monotonic improvement at every iteration
    • Automatic prevention of distribution shift
    • A higher count of verified human labels
  7. What search component does AlphaGo Zero use alongside self-play?
    • A nearest-neighbor lookup over human game records
    • A language-model tokenizer
    • Monte Carlo tree search guided by a policy and value network
    • A fixed list of opening moves
  8. Why can automatic checkers be useful in self-play for math or code tasks?
    • They guarantee that a model never learns incorrect strategies
    • They replace the need for a task specification
    • They make all generated examples independent of the model
    • They can verify generated solutions without requiring a new human label for each attempt