ऑडियो एआई गाइड

जैस्पर और क्वार्ट्जनेट एएसआर

जैस्पर और क्वार्ट्जनेट NVIDIA के एंड-टू-एंड कन्वेन्शनल स्पीच रिकग्निशन मॉडल हैं, जिसमें क्वार्ट्जनेट जैस्पर का नाटकीय रूप से छोटा, कुशल रीडिज़ाइन है।

2 मिनट लालअंतिम बार अद्यतन किया गया

सिंहावलोकन

They matter for showing how to get strong accuracy with far fewer parameters, ideal for deployment.

गहरा गोता

2019 में NVIDIA द्वारा जारी जैस्पर (जस्ट अदर स्पीच रिकॉग्नाइज़र), 54 परतों तक का एक गहरा 1D कनवल्शनल नेटवर्क है, जो CTC हानि का उपयोग करके वर्णों के लिए मेल-स्पेक्ट्रोग्राम सुविधाओं को मैप करता है। इसने घने अवशिष्ट कनेक्शन पेश किए ताकि ग्रेडिएंट बहुत गहरे ढेर के माध्यम से साफ-सुथरे प्रवाहित हों। उसी वर्ष जारी क्वार्ट्जनेट ने जैस्पर की ब्लॉक संरचना को बनाए रखा, लेकिन मानक कनवल्शन को समय-चैनल अलग करने योग्य कनवल्शन के साथ बदल दिया, प्रत्येक फ़िल्टर को गहराई से अस्थायी कनवल्शन और एक बिंदुवार चैनल मिश्रण चरण में विभाजित किया। लाइब्रिस्पीच पर सटीकता से मिलान करते समय इस कारकीकरण ने जैस्पर के मापदंडों को लगभग 333 मिलियन से घटाकर लगभग 19 मिलियन कर दिया। दोनों NVIDIA के NeMo टूलकिट में आते हैं और तेज़ GPU प्रशिक्षण और वास्तविक समय अनुमान के लिए ट्यून किए गए हैं, जो उन्हें उत्पादन ASR के लिए लोकप्रिय बिल्डिंग ब्लॉक बनाते हैं।

तकनीकी अंतर्दृष्टि

क्वार्ट्जनेट की दक्षता समय-चैनल वियोज्य संकल्पों से आती है, मोबाइलनेट के पीछे भी यही विचार है। एक सामान्य 1D कनवल्शन समय और चैनलों को एक साथ मिलाता है, जिससे K गुना C-इन गुना C-आउट वज़न खर्च होता है। इसे समय के साथ गहराई से कनवल्शन के साथ-साथ चैनलों पर 1x1 बिंदुवार कनवल्शन में अलग करने से पैरामीटर्स को K गुना C प्लस C-इन टाइम्स C-आउट तक कम कर दिया जाता है। अवशिष्ट ब्लॉकों में एकत्रित और सीटीसी के साथ प्रशिक्षित, यह मॉडल आकार और गणना के एक अंश पर लगभग जैस्पर सटीकता देता है।

सामरिक प्रभाव

पहुंच और पहुंच

यह प्रतिलेखन, कथन और ध्वनि इंटरफेस के माध्यम से पहुंच में सुधार करता है।

लागत और बजट

मीडिया टीमें छोटे बजट में बेहतर ऑडियो तेजी से भेज सकती हैं।

गति और पैमाना

ग्राहक-सामना करने वाली प्रणालियाँ बड़े पैमाने पर बोली जाने वाली बातचीत को संसाधित कर सकती हैं।

जैस्पर और क्वार्ट्जनेट एएसआर का भविष्य

क्वार्ट्जनेट की पृथक्करणीय-कन्वोल्यूशन वंशावली सीधे NVIDIA के सिट्रीनेट और व्यापक रूप से उपयोग किए जाने वाले कन्फॉर्मर मॉडल तक ले गई, जो स्थानीय कनवल्शन के साथ-साथ वैश्विक संदर्भ को पकड़ने के लिए आत्म-ध्यान जोड़ते हैं। स्ट्रीमिंग के लिए हाइब्रिड कन्वोल्यूशन-प्लस-अटेंशन आर्किटेक्चर और ट्रांसड्यूसर (आरएनएन-टी) डिकोडर्स की ओर निरंतर आंदोलन की अपेक्षा करें। मुख्य पाठ, किनारे और वास्तविक समय परिनियोजन के लिए पैरामीटर-कुशल कनवल्शन, केंद्रीय रहता है क्योंकि एएसआर फोन, कारों और एम्बेडेड उपकरणों पर जोर देता है।

वास्तविक विश्व कार्यान्वयन

NeMo टूलकिट के माध्यम से NVIDIA GPU पर रीयल-टाइम ट्रांसक्रिप्शन और वॉयस असिस्टेंट तैनात किए गए हैं

एज और एम्बेडेड एएसआर जहां क्वार्ट्जनेट का छोटा पदचिह्न मेमोरी-बाधित उपकरणों में फिट बैठता है

चिकित्सा या कानूनी शर्तों जैसे डोमेन-विशिष्ट शब्दावलियों के लिए पूर्व-प्रशिक्षित क्वार्ट्जनेट चौकियों को ठीक करना

कॉल-सेंटर एनालिटिक्स बड़ी मात्रा में ऑडियो को तेजी से और लागत प्रभावी ढंग से ट्रांसक्रिप्ट करता है

जोखिम और रेलिंग

सहमति के अभाव में आवाज के दुरुपयोग और प्रतिरूपण के जोखिम बढ़ जाते हैं।

उच्चारण, बोलियों या शोर भरे वातावरण में सटीकता कम हो सकती है।

स्पष्ट लेबलिंग के बिना सिंथेटिक ऑडियो को प्रामाणिक भाषण समझने की भूल की जा सकती है।

कार्यान्वयन रोडमैप

1

वॉयस कैप्चर, क्लोनिंग और पुन: उपयोग के लिए स्पष्ट सहमति प्राप्त करें।

2

विभिन्न वक्ताओं और पृष्ठभूमि स्थितियों में गुणवत्ता का परीक्षण करें।

3

परिभाषित करें कि किसी इंसान को आउटपुट की समीक्षा या अनुमोदन कब करना चाहिए।

4

जवाबदेही के लिए सिंथेटिक ऑडियो को लेबल करें और उद्गम रिकॉर्ड रखें।

अन्वेषण करते रहें

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Jasper and QuartzNet ASR quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

प्रश्नोत्तरी प्रारंभ करें

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

अक्सर पूछे जाने वाले प्रश्नों

What is Jasper and QuartzNet ASR?

जैस्पर और क्वार्ट्जनेट NVIDIA के एंड-टू-एंड कन्वेन्शनल स्पीच रिकग्निशन मॉडल हैं, जिसमें क्वार्ट्जनेट जैस्पर का नाटकीय रूप से छोटा, कुशल रीडिज़ाइन है। वे यह दिखाने के लिए महत्वपूर्ण हैं कि तैनाती के लिए आदर्श, बहुत कम मापदंडों के साथ मजबूत सटीकता कैसे प्राप्त की जाए।

कौन सा प्रमुख नवाचार क्वार्ट्जनेट को जैस्पर की तुलना में बहुत कम मापदंडों का उपयोग करने देता है?

क्वार्ट्जनेट मानक कनवल्शन को टाइम-चैनल वियोज्य कनवल्शन से बदल देता है, सटीकता को संरक्षित करते हुए पैरामीटर गिनती में भारी कटौती करता है।

जैस्पर के ~333 मिलियन की तुलना में क्वार्ट्जनेट के पास मोटे तौर पर कितने पैरामीटर हैं?

जैस्पर की लाइब्रिस्पीच सटीकता से मेल खाते हुए, क्वार्ट्जनेट लगभग 19 मिलियन मापदंडों तक सिकुड़ जाता है, लगभग 17 गुना कमी।

जैस्पर और क्वार्ट्जनेट दोनों को किस कंपनी ने विकसित किया?

दोनों मॉडल NVIDIA द्वारा विकसित किए गए थे और इसके NeMo कन्वर्सेशनल AI टूलकिट के माध्यम से वितरित किए गए हैं।

स्पष्ट संरेखण के बिना प्रशिक्षित करने के लिए जैस्पर और क्वार्ट्जनेट किस हानि फ़ंक्शन का उपयोग करते हैं?

दोनों सीटीसी हानि का उपयोग करते हैं, जो प्रति-फ्रेम लेबल की आवश्यकता के बिना चर-लंबाई ऑडियो को चरित्र अनुक्रम में संरेखित करता है।

कौन सी संरचनात्मक विशेषता जैस्पर के बहुत गहरे (54-परत तक) नेटवर्क के माध्यम से ग्रेडिएंट्स को प्रवाहित करने में मदद करती है?

जैस्पर घने अवशिष्ट (स्किप) कनेक्शन का उपयोग करता है ताकि ग्रेडिएंट इसके गहरे कन्वेन्शनल स्टैक के माध्यम से सफाई से फैल सकें।