概述
They clean audio by estimating the noise spectrum and mathematically subtracting or attenuating it, and they still underpin many modern systems.
深入探討
Both methods operate on short-time Fourier transform representations. Spectral subtraction estimates a noise spectrum, often from speech-free frames, then subtracts an estimate from noisy magnitudes; negative results are floored, and imperfect estimates can leave isolated peaks heard as musical noise. Wiener filtering applies frequency-dependent gains derived from a statistical signal-and-noise model. Under the assumed model and chosen squared-error objective, its linear estimate minimizes mean-squared error; the quality depends on the accuracy of the signal and noise statistics. Both methods can struggle when the noise changes rapidly.
現實世界的實施
Audacity 等音訊編輯器中的降噪預設(頻譜雜訊消除)
舊式電話和 VoIP 系統中的語音清理
低功耗嵌入式晶片上語音辨識前的前端去噪
提高早期助聽器和聽寫系統的清晰度
譜減法與維納濾波的未來
這些方法並沒有消失;而是正在消失。他們正在被吸收。深度網路現在學習維納濾波分析得出的掩碼,而基於信噪比的增益思想直接啟發了神經語音增強中使用的時頻掩碼。預計將繼續用作受限硬體上的輕量級前端、穩定學習模型的先驗以及研究人員對新系統進行基準測試的可解釋基線。
付諸實踐
為什麼這很重要
- 交通與覆蓋範圍. 它透過轉錄、旁白和語音介面提高了可訪問性。
- 成本與預算. 媒體團隊可以用更少的預算更快地交付精美的音訊。
- 速度與規模. 面向客戶的系統可以處理更大規模的語音互動。
留意
- 如果未徵得同意,語音濫用和冒充風險就會增加。
- 由於口音、方言或嘈雜的環境,準確性可能會下降。
- 如果沒有明確的標籤,合成音訊可能會被誤認為是真實的語音。
後續步驟
- 獲得語音捕獲、克隆和重用的明確同意。
- 測試不同揚聲器和背景條件下的品質。
- 定義人員必須審查或批准輸出的時間。
- 標記合成音訊並保留來源記錄以供問責。
不斷探索
常見問題
What is Spectral Subtraction and Wiener Filtering?
譜減法和維納濾波是經典的、預深度學習的降噪主力。它們透過估計噪音頻譜並以數學方式減去或衰減它來淨化音頻,並且它們仍然支撐著許多現代系統。
光譜減法通常會帶來哪些惱人的偽影?
不完美的減法會留下孤立的頻譜峰值,聽起來像隨機的顫音,稱為音樂噪音。
譜減法和維納濾波主要在哪個域中運作?
兩者在處理之前都透過短時傅立葉變換將音訊變換到頻域。
Under a specified statistical signal-and-noise model, what criterion does the classical Wiener estimator minimize?
The Wiener solution is minimum mean-square error for the assumed second-order statistics and linear estimator class.
譜減法通常如何估計雜訊譜?
它測量停頓或非語音間隙期間的平均噪音功率,然後從每個幀中減去該估計值。
In the common power-spectrum Wiener gain G=Ps/(Ps+Pn), what do Ps and Pn denote?
This gain uses estimated signal and noise powers; its form follows under the usual additive, uncorrelated model.