概述
WORLD 是一种声码器,它使用基频、频谱包络和非周期性来估计和重新合成语音。这些参数可以在信号处理工作流程中单独编辑,但编辑不能保证感知的说话者身份或自然度保持不变。
深入探讨
在源滤波器模型中,源代表浊音声带激励或清音的类噪声激励,滤波器代表声道的共振。 WORLD 是一款专为高质量语音合成和实时应用而设计的声码器。它估计 F0、频谱包络和非周期性,然后使用这些特征来合成语音。其算法包括用于 F0 的 DIO 或 Harvest、用于频谱包络的 CheapTrick 以及用于非周期性的 D4C。保持参数独立可以进行受控编辑,例如在保持包络流固定的同时更改 F0,但合成伪影和感知变化仍然可能发生。
现实世界的实施
语音转换工具可以改变说话者的音高和音色,同时保持语音清晰易懂
以新音高重新合成音符的歌声合成器(例如 UTAU/NNSVS 生态系统)
在声码之前生成 F0、频谱和非周期性流的参数化文本转语音系统
无需重新训练即可进行音高转换、时间拉伸和韵律编辑的语音研究基线
源滤波器声码和世界的未来
混合语音系统可以将可解释的 F0 和频谱特征与神经波形生成结合起来。 WORLD 对于快速分析、可控合成和研究比较仍然有用,而新的神经方法通常被探索以感知自然性。应用程序应在修改参数后评估伪像、清晰度和说话者相似度。
付诸实践
为什么这很重要
- 交通与覆盖范围. 它通过转录、旁白和语音界面提高了可访问性。
- 成本与预算. 媒体团队可以用更少的预算更快地交付精美的音频。
- 速度与规模. 面向客户的系统可以处理更大规模的语音交互。
留意
- 如果未征得同意,语音滥用和冒充风险就会增加。
- 由于口音、方言或嘈杂的环境,准确性可能会下降。
- 如果没有明确的标签,合成音频可能会被误认为是真实的语音。
后续步骤
- 获得语音捕获、克隆和重用的明确同意。
- 测试不同扬声器和背景条件下的质量。
- 定义人员必须审查或批准输出的时间。
- 标记合成音频并保留来源记录以供问责。
不断探索
常见问题
什么是源滤声码和WORLD?
源滤波器模型将语音激励与声道的声学塑造分开。 WORLD 是一种声码器,它使用基频、频谱包络和非周期性来估计和重新合成语音。这些参数可以在信号处理工作流程中单独编辑,但编辑不能保证感知的说话者身份或自然度保持不变。
在语音的源过滤器模型中,“过滤器”代表什么?
滤波器是声道的共鸣——喉咙、嘴巴和鼻子的形状,给声音着色。来源是声带嗡嗡声或嘈杂的气流。
WORLD 声码器从语音中提取哪三个参数?
WORLD 将语音分解为基频 (F0)、频谱包络(音色/滤波器)和非周期性(噪声与音调平衡)。
用于估计谱包络的 WORLD 算法的名称是什么?
CheapTrick 估计出一个平滑的谱包络,该包络对于音调估计中的小误差具有鲁棒性。
WORLD 的参数分离可以让编辑直接做什么?
WORLD 分别公开 F0 和频谱包络流,因此系统可以编辑其中一个,同时保持另一个固定;感知结果并不能保证完美地保留身份。
与神经声码器相比,哪种说法最能描述世界?
WORLD 估计显式语音参数并从中合成,而神经声码器学习波形生成;质量和计算取决于系统和用例。