ต่อไปคำแนะนำต่อไป
PANN: โครงข่ายประสาทเทียมเสียงที่ได้รับการฝึกล่วงหน้า
เสียงเอไอ
คู่มือเสียง AI
A neural vocoder generates a waveform from acoustic features.
ฟังคำแนะนำนี้บรรยายโดย AI · ~1 min
The WaveNet and HiFi-GAN papers describe two specific neural speech-generation architectures; their results are scoped to the reported tasks, data and systems.
WaveNet models raw audio autoregressively and the original paper describes sample-by-sample generation. HiFi-GAN is a GAN-based speech synthesis model. Its generator uses multi-receptive-field fusion blocks, while its discriminators operate across periods and temporal scales. These are architecture details and benchmark results from the cited papers; they do not establish universal multilingual, singing, accessibility or voice-restoration performance.
Reading WaveNet as an autoregressive model of raw audio samples.
Examining HiFi-GAN’s multi-receptive-field fusion generator blocks.
Comparing HiFi-GAN’s multi-period and multi-scale discriminators.
Treating acoustic-model output and waveform synthesis as separate stages in the evaluated HiFi-GAN/TTS setup.
Evaluate a vocoder on the target acoustic features, speakers and recording domain using matched baselines. The cited papers do not establish that one architecture is best for every language, singing task, device or deployment.
จดหมายข่าวฟรี
เรื่องราว AI ที่ตรวจสอบแล้ว 3 เรื่องทุกวันทำงาน เช้า, เขียนเป็นภาษาอังกฤษธรรมดา ฟรีตลอดไป ไม่มีโฆษณา
อีเมลหนึ่งฉบับทุกวันทำงาน ยกเลิกการสมัครในคลิกเดียว เราไม่เคยขายหรือแชร์ที่อยู่อีเมลของคุณ
ทดสอบตัวเอง
ข้อเสนอแนะทันทีสำหรับทุกคำตอบ และใบรับรองที่สามารถแชร์ได้พร้อม ID ที่ตรวจสอบได้เมื่อคุณผ่านหลักสูตร
สนับสนุนการศึกษา AI ฟรี AI Understanding เป็นองค์กรไม่แสวงหาผลกำไร 501(c)(3) — ไม่มีโฆษณา ไม่มีกำแพงเงิน, ตลอดไป บริจาค
A neural vocoder generates a waveform from acoustic features. The WaveNet and HiFi-GAN papers describe two specific neural speech-generation architectures; their results are scoped to the reported tasks, data and systems.
ตัวแปลงเสียงแบบนิวรอลใช้คุณสมบัติเสียงขนาดกะทัดรัด ซึ่งโดยทั่วไปจะเป็นเมลสเปกโตรแกรม และสังเคราะห์รูปคลื่นเสียงดิบตามจริงที่คุณได้ยิน
WaveNet จาก DeepMind ในปี 2559 ได้สร้างตัวอย่างเสียงทีละตัวอย่าง และสร้างเสียงพูดที่เป็นธรรมชาติอย่างน่าทึ่ง โดยเป็นการเริ่มต้นยุคของตัวแปลงเสียงแบบระบบประสาท
WaveNet เป็นแบบอัตโนมัติ: แต่ละตัวอย่างเสียงขึ้นอยู่กับตัวอย่างก่อนหน้า ดังนั้นการสร้างตัวอย่างนับหมื่นต่อวินาทีจึงมีราคาแพงในการคำนวณ
เมล-สเปกโตรแกรมจะรักษาขนาด (พลังงานต่อย่านความถี่) ไว้แต่มีเฟสลดลง ดังนั้น โวโคเดอร์จะต้องสร้างรูปคลื่นที่สอดคล้องกันขึ้นมาใหม่ซึ่งมีเฟสที่เป็นไปได้
HiFi-GAN ใช้ตัวแบ่งแยกหลายตัวในการตรวจสอบมาตราส่วนเวลาและช่วงเวลาที่แตกต่างกัน โดยผลักดันให้เครื่องกำเนิดสร้างฮาร์โมนิคและภาวะชั่วคราวที่สมจริง
เรียนรู้ต่อไป
คำแนะนำเพิ่มเติมที่เลือกสำหรับหัวข้อนี้
ต่อไปคำแนะนำต่อไป
PANN: โครงข่ายประสาทเทียมเสียงที่ได้รับการฝึกล่วงหน้า
เสียงเอไอ