引導式測驗 · 中等 等級
Whisper 帶時間戳的單字對齊測驗
了解 Whisper 字對齊方法如何估計時間戳,以及為什麼強制對齊和交叉注意力有不同的限制。
問題 1 的 8
字級對齊增加了 Whisper 原生輸出所缺少的哪些內容?
預覽每個問題8 問題
當您參加測驗時,就會出現答案和解釋。
- 字級對齊增加了 Whisper 原生輸出所缺少的哪些內容?
- 每個單字的開始和結束時間
- 更高的轉錄準確度
- 演講者身分標籤
- 背景噪音去除
- 耳語時間戳記使用哪個內部訊號來及時定位單字?
- 音訊波形幅度
- 解碼器在音訊幀上的交叉注意力權重
- 優化器的梯度
- 分詞器詞彙量大小
- 為什麼 whisper-timestamped 在對齊時使用動態時間扭曲?
- To translate the transcript into another language
- To identify the speaker without using audio
- To find an ordered, monotonic path between token and audio-frame scores
- To guarantee exact boundaries for every word
- 與原始注意力相比,WhisperX 如何銳化單字邊界?
- 它提高了取樣率
- 它只使用更大的 Whisper 檢查點
- 它刪除了標點符號
- 它在文本上運行一個單獨的基於音素的強制對齊模型
- Whisper 的編碼器以什麼速率產生音訊幀?
- 每秒約 50 幀(每 20 毫秒一幀)
- 每秒恰好 1 幀
- 每秒 1000 幀
- 每個字一幀
- Whisper 處理音訊的長度是多少?
- 5秒區塊
- 30秒的片段
- 2分鐘的區塊
- 單一樣品
- What does forced alignment assume is already available?
- A speaker identity for every sound
- A translation in every language
- A transcript to align with the audio
- A list of subtitle colors
- What limitation should users keep in mind when interpreting word timestamps?
- They prove the transcript is error-free
- They always identify the speaker correctly
- They are guaranteed to have millisecond accuracy
- They are estimates and can be wrong when speech or alignment is difficult