आगेअगली गाइड
वॉयसबॉक्स फ्लो-मैचिंग स्पीच जेनरेशन
ऑडियो एआई
ऑडियो एआई गाइड
वेवग्लो एनवीआईडीआईए का एक प्रवाह-आधारित न्यूरल वोकोडर है जो ऑटोरेग्रेशन के बिना एक ही पास में मेल-स्पेक्ट्रोग्राम से भाषण तरंगों को संश्लेषित करता है।
इस गाइड को सुनेंएआई-नैरेटेड · ~2 min
यह मायने रखता है क्योंकि यह केवल एक साधारण संभावना हानि का उपयोग करके वास्तविक समय की तुलना में तेजी से उच्च गुणवत्ता वाला ऑडियो वितरित करता है।
2018 में NVIDIA में प्रेंजर, वैले और कैटनज़ारो द्वारा जारी वेवग्लो, ग्लो और वेवनेट के विचारों को मिलाकर एक ऐसा वोकोडर बनाता है जो तेज़ और प्रशिक्षित करने में आसान दोनों है। जीएएन वोकोडर्स के विपरीत, यह एक सामान्यीकरण प्रवाह है: यह एक साधारण गॉसियन वितरण और मेल-स्पेक्ट्रोग्राम पर वातानुकूलित ऑडियो तरंग के बीच एक उलटा मैपिंग सीखता है। प्रशिक्षण डेटा की सटीक लॉग-संभावना को अधिकतम करता है, इसलिए इसे किसी अलग विभेदक, किसी ऑटो-रिग्रेशन और किसी दो-नेटवर्क शिक्षक-छात्र आसवन की आवश्यकता नहीं होती है, जो पहले समानांतर वेवनेट दृष्टिकोण की आवश्यकता होती थी। ऑडियो उत्पन्न करने के लिए आप गॉसियन शोर का नमूना लें और उलटे नेटवर्क को रिवर्स में चलाएं। वेवग्लो आधुनिक जीपीयू पर वास्तविक समय की तुलना में कहीं अधिक तेजी से संश्लेषण करते हुए वेवनेट की तुलना में गुणवत्ता का भाषण तैयार करता है।
प्राकृतिक स्टूडियो-गुणवत्ता वाले भाषण का उत्पादन करने के लिए NVIDIA के संदर्भ टीटीएस पाइपलाइन में टैकोट्रॉन 2 के साथ युग्मन
कथन, डबिंग और सामग्री निर्माण वर्कफ़्लो के लिए तेज़ GPU भाषण संश्लेषण
अनुसंधान में प्रशिक्षण और डेमो ऑडियो उत्पन्न करना जहां स्थिर, एकल-नुकसान प्रशिक्षण को प्राथमिकता दी जाती है
NVIDIA हार्डवेयर पर चलने वाले इंटरैक्टिव सिस्टम में वास्तविक समय-सक्षम वॉयस आउटपुट
वेवग्लो ने प्रदर्शित किया कि शुद्ध प्रवाह वोकोडर ऑटोरेग्रेसिव गुणवत्ता को प्रतिद्वंद्वी कर सकते हैं, जो बाद के प्रवाह और प्रवाह-मिलान ऑडियो मॉडल को प्रभावित कर सकते हैं। इसकी एकल-नुकसान सादगी आकर्षक बनी हुई है, हालांकि HiFi-GAN जैसे GAN वोकोडर अब अक्सर आकार और गति पर जीत हासिल करते हैं। आगे देखते हुए, प्रवाह-आधारित और प्रवाह-मिलान विचार आधुनिक प्रसार-आसन्न टीटीएस में पुनर्जीवित हो रहे हैं, और वेवग्लो-शैली के उलटे डिजाइन सटीक-संभावना, नियंत्रणीय और कुशल तरंग पीढ़ी पर अनुसंधान को सूचित करना जारी रखते हैं।
मुफ़्त न्यूज़लेटर
हर कार्यदिवस की सुबह तीन सत्यापित एआई कहानियाँ, सादे अंग्रेजी में लिखी गईं। हमेशा के लिए मुफ़्त, कोई विज्ञापन नहीं।
प्रत्येक सप्ताह के दिन एक ईमेल. एक क्लिक में सदस्यता समाप्त करें. हम आपका पता कभी नहीं बेचते या साझा नहीं करते।
स्वयं की जांच करो
प्रत्येक उत्तर पर त्वरित प्रतिक्रिया, और पाठ्यक्रम पास करने के बाद एक सत्यापन योग्य आईडी के साथ एक साझा करने योग्य प्रमाणपत्र।
निःशुल्क एआई शिक्षा का समर्थन करें। AI Understanding एक 501(c)(3) गैर-लाभकारी संस्था है - कोई विज्ञापन नहीं, कोई पेवॉल नहीं। दान करें
वेवग्लो एनवीआईडीआईए का एक प्रवाह-आधारित न्यूरल वोकोडर है जो ऑटोरेग्रेशन के बिना एक ही पास में मेल-स्पेक्ट्रोग्राम से भाषण तरंगों को संश्लेषित करता है। यह मायने रखता है क्योंकि यह केवल एक साधारण संभावना हानि का उपयोग करके वास्तविक समय की तुलना में तेजी से उच्च गुणवत्ता वाला ऑडियो वितरित करता है।
वेवग्लो, वेवनेट के ऑडियो-मॉडलिंग डिज़ाइन के साथ ग्लो की उलटी प्रवाह संरचना को फ़्यूज़ करता है।
वेवग्लो एक सामान्यीकरण प्रवाह है जो गॉसियन शोर और ऑडियो के बीच एक उलटा मैपिंग सीखता है।
क्योंकि नेटवर्क उलटा है, आप गॉसियन शोर खींचते हैं और मेल-स्पेक्ट्रोग्राम पर वातानुकूलित प्रवाह को पीछे की ओर चलाते हैं।
प्रवाह के रूप में, वेवग्लो सटीक लॉग-संभावना को अधिकतम करता है, जिसके लिए किसी विभेदक या आसवन की आवश्यकता नहीं होती है।
प्रत्येक प्रवाह चरण ग्लो से अपनाए गए एक उलटे 1x1 कनवल्शन के साथ एक एफ़िन युग्मन परत को जोड़ता है।
सीखते रहो
इस विषय के लिए अधिक मार्गदर्शिकाएँ चुनी गईं
आगेअगली गाइड
वॉयसबॉक्स फ्लो-मैचिंग स्पीच जेनरेशन
ऑडियो एआई