HAGAHA Audio AI

Codka Ku-saleysan socodka WaveGlow

WaveGlow waa cod-bixiye neural-ku-saleysan oo ka socda NVIDIA kaasoo ka soo saara mowjadaha hadalka ee mel-spectrograms hal baas oo aan is-hortaag lahayn.

Dulmar

WaveGlow waa cod-bixiye neural-ku-saleysan oo ka socda NVIDIA kaasoo ka soo saara mowjadaha hadalka ee mel-spectrograms hal baas oo aan is-hortaag lahayn. Waa arrin sababtoo ah waxay soo gudbisaa cod tayo sare leh si ka dhakhso badan wakhtiga dhabta ah iyadoo la isticmaalayo kaliya luminta suurtagalka ah.

WaveGlow Flow-based Vocoder wuxuu ku fadhiyaa audio-AI qulqulka shaqada kaasoo beddela hadalka, muusiga, iyo codka isgaarsiinta, gelista, iyo soosaarka warbaahinta.

quusitaanka qoto dheer

WaveGlow, oo ay sii daayeen Prenger, Valle, iyo Catanzaro ee NVIDIA 2018, waxay isku daraa fikradaha Glow iyo WaveNet si ay u dhisaan cod-bixiye kaas oo labadaba degdeg ah oo sahlan in la tababaro. Si ka duwan vocodeers GAN, waa socodka caadiga ah: waxay bartaa khariidad aan leexleexan karin inta u dhaxaysa qaybinta Gaussian fudud iyo qaabka mowjadda maqalka, oo ku xidhan mel-spectrogram. Tababarku waxa uu kordhiyaa suurtogalnimada saxda ah ee xogta, sidaa awgeed uma baahna takoorid gooni ah, ma jiro dib-u-celin toos ah, iyo ma jirto laba shabakad oo macalin-arday kala fogayn oo hore isbarbar socday wajiyada WaveNet. Si aad u dhaliso cod waxaad muunad muunad ku samaysaa guuxa Gaussian oo aad u maamuli kartaa shabkada aan leexan karin dhanka kale. WaveGlow waxay soo saartaa hadal tayo leh oo la barbardhigi karo WaveNet iyada oo si ka dhakhso badan wakhtiga dhabta ah u soo saarta GPU casri ah.

Aragtida Farsamada

WaveGlow waxay xirtaa tillaabooyin socodka qulqulka ah ee aan leexan karin, mid kastaa wuxuu isku daraa lakabka isku xirka affin iyo 1x1 rogaal celin aan la rogi karin oo laga soo amaahday Glow. Muunado maqal ah ayaa loo qaybiyaa vectors iyada oo loo marayo hawlgal tuujin si lakabyada isku xidha ay u beddelaan si hufan. Sababtoo ah tillaabo kastaa waa mid aan leexleexan karin, jihada hore waxay xisaabinaysaa suurtogalnimada tababarka iyo jihada jihada ee qaylada iyo dhawaaqa fikradda. Shabakad keli ah iyo hal ujeeddo oo xun oo macquul ah ayaa ka dhigaya tababarka mid deggan oo fudud.

Hagaajinta WaveGlow Vocoder-ku-salaysan socodka

WaveGlow waa cod-bixiye neural-ku-saleysan oo ka socda NVIDIA kaasoo ka soo saara mowjadaha hadalka ee mel-spectrograms hal baas oo aan is-hortaag lahayn. Waa arrin sababtoo ah waxay soo gudbisaa cod tayo sare leh si ka dhakhso badan wakhtiga dhabta ah iyadoo la isticmaalayo kaliya luminta suurtagalka ah. WaveGlow Flow-based Vocoder wuxuu ku fadhiyaa audio-AI qulqulka shaqada kaasoo beddela hadalka, muusiga, iyo codka isgaarsiinta, gelista, iyo soosaarka warbaahinta. Si loo dhiso faham qoto dheer, ula dhaqan WaveGlow Flow-ku-salaysan Vocoder sida moodal hawlgelineed, ma aha hal sifo: qeex natiijooyinka la rabo, caddee fikradaha, oo kala saar waxa nidaamku si kalsooni leh u qaban karo iyo waxa weli u baahan go'aan khabiir.

Ficil ahaan, kooxaha xoogga leh ee isticmaalaya WaveGlow Flow-based Vocoder waxay ula dhaqmaan tayada, daahitaanka, iyo oggolaanshaha sida qaybo isku mid ah oo muhiim ah oo ka mid ah istiraatiijiyadda geynta. Waxay diiwaangeliyaan shuruudaha guusha ee cad, tijaabiyaan xogta dhabta ah iyo qulqulka shaqada, waxayna ku celceliyaan ku saleysan qaababka guul darrida ee la arkay halkii ay hal mar ku guuleysan lahaayeen halbeegyada. Tani waa halka fahamka aragtida uu isu beddelo karti waara oo dhan badeecada, siyaasadda, iyo hawlgallada.

Waxay wanaajisaa marin u helida iyada oo loo marayo qoraal-qorid, sheeko, iyo is-dhexgalyo cod. Isla mar ahaantaana, si xun u isticmaalka codka iyo khataraha is-yeelyeelku way kordhaan marka oggolaanshaha la waayo. Habka ugu adkeysi badan waa in la isku daro xawaaraha tijaabada iyo anshaxa maamulka: socodsiinta duuliyayaasha, qabashada caddaynta, daabacaadda go'aanka, iyo si joogto ah u cusboonaysii ilaalinta sida habdhaqanka moodeelka, filashada isticmaale, iyo shuruudaha sharciyaynta.

Saamaynta Istiraatijiyadeed

Waxay wanaajisaa marin u helida iyada oo loo marayo qoraal-qorid, sheeko, iyo is-dhexgalyo cod.

Waxay wanaajisaa marin u helida iyada oo loo marayo qoraal-qorid, sheeko, iyo is-dhexgalyo cod. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Kooxaha warbaahintu waxay ku soo rari karaan codka sifaysan si degdeg ah iyagoo wata miisaaniyado yaryar.

Kooxaha warbaahintu waxay ku soo rari karaan codka sifaysan si degdeg ah iyagoo wata miisaaniyado yaryar. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Nidaamyada u jeedda macmiisha waxay ka baaraandegi karaan isdhexgalka hadalka si weyn.

Nidaamyada u jeedda macmiisha waxay ka baaraandegi karaan isdhexgalka hadalka si weyn. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Mustaqbalka Codka Ku Salaysan Socodka WaveGlow

WaveGlow waxay muujisay in cod-bixiyeyaasha socodka saafiga ah ay la tartami karaan tayada is-difaacida, saamaynaya socodka dambe iyo moodooyinka maqalka ah ee u dhigma. Fududnaanteeda hal-khasaaro ayaa weli ah mid soo jiidasho leh, in kasta oo cod-bixiyayaasha GAN sida HiFi-GAN ay hadda inta badan ku guuleystaan ​​cabbirka iyo xawaaraha. Horay u fiirsashada, fikradaha ku salaysan qulqulka iyo qulqulka-ku-habboonaanta ayaa dib u soo nooleynaya faafinta casriga ah ee ku xiga TTS, iyo qaabka WaveGlow nashqadaha aan leexleexan karin waxay sii wadaan inay ku wargeliyaan cilmi-baarista suurtagalnimada saxda ah, la xakameyn karo, iyo jiilka mowjadaha wax ku oolka ah.

Dhaqangelinta Adduunka-dhabta ah

Ku biirista Tacotron 2 ee tuubada tixraaca ee NVIDIA ee TTS si loo soo saaro hadalka tayada istuudiyaha dabiiciga ah

Isku-dubaridka hadalka GPU-da degdega ah ee ka-sheekaynta, duubista, iyo abuurista nuxurka socodka shaqada

Soo saarista tababbarka iyo maqalka muujinta ee cilmi-baarista halkaasoo xasilloon, tababbarka khasaare-la'aanta ah la doorbido

Wax-soo-saarka codka ee wakhtiga-dhabta ah ee hababka is-dhexgalka ee ku shaqeeya qalabka NVIDIA

Hababka Dhaqangelinta

Codka ku salaysan socodka WaveGlow ee ficil ahaan

Ku biirista Tacotron 2 ee tuubada tixraaca ee NVIDIA ee TTS si loo soo saaro hadalka tayada istuudiyaha dabiiciga ah.

Isku-dubbarididda Tacotron 2 ee tixraaca NVIDIA ee TTS dhuumaha si ay u soo saaraan tayada hadalka ee istuudiyaha dabiiciga ah Kooxaha sida caadiga ah waxay helayaan natiijooyin ka wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, oo la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada khaladka waqti ka dib.

Codka ku salaysan socodka WaveGlow ee ficil ahaan

Isku-dubaridka hadalka GPU-da degdega ah ee ka-sheekaynta, duubista, iyo abuurista nuxurka socodka shaqada.

Isku-dubbaridka hadalka GPU-da degdega ah ee ka-sheekaynta, duubista, iyo abuurista nuxurka shaqa-socodka kooxuhu waxay badanaa helaan natiijooyin wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, oo la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada qaladka waqti ka dib.

Codka ku salaysan socodka WaveGlow ee ficil ahaan

Soo saarista tababbarka iyo maqalka muujinta ee cilmi-baarista halkaasoo xasilloon, tababbarka khasaare-la'aanta ah la doorbido.

Soo saarista tabobarka iyo bandhiga maqalka ee cilmi baadhista halka la door bidayo xasiloon, tababbarka hal khasaare ah kooxuhu caadi ahaan waxay helayaan natiijooyin ka wanaagsan marka ay qeexaan heerarka tayada ee hore, waxay hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, waxayna la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada qaladka waqti ka dib.

Codka ku salaysan socodka WaveGlow ee ficil ahaan

Wax-soo-saarka codka ee wakhtiga-dhabta ah ee hababka is-dhexgalka ee ku shaqeeya qalabka NVIDIA.

Wax-soo-saarka codka ee wakhtiga-dhabta ah ee nidaamyada is-dhexgalka ee ku shaqeeya kooxaha qalabka NVIDIA waxay caadi ahaan helaan natiijooyin wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadista bini'aadamka ee kiisaska cirifka ah, oo la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada qaladka waqti ka dib.

Khatarta & Dariiqyada Ilaalada

!

Si xun u isticmaalka codka iyo khataraha is-yeelyeelku way kordhaan marka oggolaanshaha la waayo.

!

Saxnimadu waxay hoos ugu dhici kartaa lahjadaha, lahjadaha, ama jawiga buuqa badan.

!

Maqalka synthetic waxaa lagu khaldi karaa hadal dhab ah iyada oo aan si cad loo calaamadin.

Dhaqangelinta Roadmapka

1

Hel ogolaansho cad oo ku saabsan qabashada codka, xidhitaanka, iyo dib u isticmaalka

Hel ogolaansho cad oo ku saabsan qabashada codka, xidhitaanka, iyo dib u isticmaalka Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

2

Tijaabi tayada ku hadasha kala duwan iyo xaaladaha asalka.

Tijaabi tayada ku hadasha kala duwan iyo xaaladaha asalka. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

3

Qeex marka bani'aadamku ay tahay inuu dib u eego ama oggolaado wax soo saarka.

Qeex marka bani'aadamku ay tahay inuu dib u eego ama oggolaado wax soo saarka. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

4

Ku calaamadee codka synthetic oo xafid diiwaannada la-xisaabtanka.

Ku calaamadee codka synthetic oo xafid diiwaannada la-xisaabtanka. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

Sii wad Sahaminta