引導式測驗 · 簡單 等級

提前停止測驗

涵蓋驗證監控、耐心和檢查點恢復,以及何時提前停止可能會規範訓練而不保證較低的測試錯誤。

相關引導路徑提前停止
問題 1 的 8

提前停車主要監控什麼訊號來決定何時停車?

預覽每個問題8 問題

當您參加測驗時,就會出現答案和解釋。

  1. 提前停車主要監控什麼訊號來決定何時停車?
    • 驗證集性能
    • 訓練集損失
    • GPU溫度
    • 模型參數數量
  2. 「耐心」參數控制什麼?
    • 最大學習率
    • 在停止之前要等待多少時期沒有改善
    • 批量大小
    • 驗證折疊數
  3. 提早停止觸發後,您通常應該保持哪些重量?
    • 最後紀元的權重
    • 隨機初始化的權重
    • 最佳驗證期間的權重
    • 所有時期的平均值
  4. 為什麼早停可以作為一種正則化方式?
    • 它為每個權重添加固定的 L2 懲罰
    • 它保證在每個資料集上都能得到更低的測試誤差
    • 它防止模型看到訓練樣本
    • 它限制優化進行的時間長度,並能減少對訓練特定模式的擬合
  5. 訓練期間驗證誤差曲線的典型形狀最好描述為:
    • 呈先跌後升的 U 型
    • 單調遞減
    • 一條平線
    • 單調遞增
  6. “min_delta”閾值通常指定什麼?
    • 最小層數
    • 算是進步的最小改進
    • 最小批量
    • 最小資料集大小
  7. 耐心允許早停規則做什麼?
    • 無論驗證結果如何,永遠繼續訓練
    • 在每個批次後改變模型架構
    • 在停止前等待設定數量的驗證檢查而不符合改進
    • 使用測試集來選擇最終的 epoch
  8. 為什麼測試集通常應該保持在早停循環之外?
    • 測試集不能包含標籤
    • 訓練函式庫無法載入測試資料
    • 提前停止需要測試集為空
    • 反覆以測試表現進行選擇會使其成為模型選擇的一部分