引導式測驗 · 中等 等級

Whisper 帶時間戳的單字對齊測驗

了解 Whisper 字對齊方法如何估計時間戳,以及為什麼強制對齊和交叉注意力有不同的限制。

問題 1 的 8

字級對齊增加了 Whisper 原生輸出所缺少的哪些內容?

預覽每個問題8 問題

當您參加測驗時,就會出現答案和解釋。

  1. 字級對齊增加了 Whisper 原生輸出所缺少的哪些內容?
    • 每個單字的開始和結束時間
    • 更高的轉錄準確度
    • 演講者身分標籤
    • 背景噪音去除
  2. 耳語時間戳記使用哪個內部訊號來及時定位單字?
    • 音訊波形幅度
    • 解碼器在音訊幀上的交叉注意力權重
    • 優化器的梯度
    • 分詞器詞彙量大小
  3. 為什麼 whisper-timestamped 在對齊時使用動態時間扭曲?
    • To translate the transcript into another language
    • To identify the speaker without using audio
    • To find an ordered, monotonic path between token and audio-frame scores
    • To guarantee exact boundaries for every word
  4. 與原始注意力相比,WhisperX 如何銳化單字邊界?
    • 它提高了取樣率
    • 它只使用更大的 Whisper 檢查點
    • 它刪除了標點符號
    • 它在文本上運行一個單獨的基於音素的強制對齊模型
  5. Whisper 的編碼器以什麼速率產生音訊幀?
    • 每秒約 50 幀(每 20 毫秒一幀)
    • 每秒恰好 1 幀
    • 每秒 1000 幀
    • 每個字一幀
  6. Whisper 處理音訊的長度是多少?
    • 5秒區塊
    • 30秒的片段
    • 2分鐘的區塊
    • 單一樣品
  7. What does forced alignment assume is already available?
    • A speaker identity for every sound
    • A translation in every language
    • A transcript to align with the audio
    • A list of subtitle colors
  8. What limitation should users keep in mind when interpreting word timestamps?
    • They prove the transcript is error-free
    • They always identify the speaker correctly
    • They are guaranteed to have millisecond accuracy
    • They are estimates and can be wrong when speech or alignment is difficult