Audio AI GUIDE

Vocoder dabere na usoro WaveGlow

WaveGlow bụ vocoder neural nke sitere na NVIDIA na-emepụta ụdị okwu okwu sitere na mel-spectrograms n'otu ngafe na-enweghị mgbagha.

Nchịkọta

WaveGlow bụ vocoder neural nke sitere na NVIDIA na-emepụta ụdị okwu okwu sitere na mel-spectrograms n'otu ngafe na-enweghị mgbagha. Ọ dị mkpa n'ihi na ọ na-ewepụta ọdịyo dị elu ngwa ngwa karịa ozugbo na-eji naanị mfu dị mfe.

Vocoder nke dabeere na WaveGlow na-anọdụ n'usoro ọrụ ọdịyo-AI nke na-agbanwe okwu, egwu, na ụda maka nzikọrịta ozi, nnweta na mmepụta mgbasa ozi.

Ime miri emi

WaveGlow, nke Prenger, Valle, na Catanzaro wepụtara na NVIDIA na 2018, na-ejikọta echiche sitere na Glow na WaveNet iji wuo ụda olu nke dị ngwa ma dị mfe ịzụ. N'adịghị ka ndị vocoders GAN, ọ bụ ihe na-eme ka ọ dị mma: ọ na-amụta maapụ a na-apụghị ịgbagha agbagha n'etiti nkesa Gaussian dị mfe na ụdị ụda olu, nke edobere na mel-spectrogram. Ọzụzụ na-ebuli ikike ndekọ data nke ọma, yabụ na ọ chọghị onye ịkpa oke dị iche, enweghị ngbanwe akpaaka, yana enweghị nhụsianya onye nkuzi-ụmụ akwụkwọ netwọkụ abụọ nke na mbụ yiri WaveNet chọrọ. Iji mepụta ọdịyo, ị ga-elele mkpọtụ Gaussian wee mee netwọkụ na-enweghị ike ịgbagha azụ. WaveGlow na-ewepụta okwu dị mma tụnyere WaveNet ebe ọ na-arụkọ ọrụ ngwa ngwa karịa ezigbo oge na GPU ọgbara ọhụrụ.

Nghọta nka nka

WaveGlow na-achịkọta usoro mgbaba a na-apụghị ịgbagha agbagha, nke ọ bụla na-ejikọta oyi akwa njikọ nke affin na mgbagha 1 × 1 na-agbanwe agbanwe agbaziri na Glow. A na-achịkọta ihe nlele ọdịyo n'ime vectors site na arụ ọrụ mpi nke mere na njikọta ọnụ nwere ike gbanwee ha nke ọma. N'ihi na nzọụkwụ ọ bụla enweghị ike ịtụgharị, ntụzịaka na-aga n'ihu na-agbakọ ohere maka ọzụzụ yana mkpọtụ maapụ ntụgharị gaa na ọdịyo maka ntụgharị. Otu netwọkụ na otu ebumnuche log na-adịghị mma na-eme ka ọzụzụ bụrụ nke kwụsiri ike ma dị mfe.

Vocoder dabere na usoro WaveGlow

WaveGlow bụ vocoder neural nke sitere na NVIDIA na-emepụta ụdị okwu okwu sitere na mel-spectrograms n'otu ngafe na-enweghị mgbagha. Ọ dị mkpa n'ihi na ọ na-ewepụta ọdịyo dị elu ngwa ngwa karịa ozugbo na-eji naanị mfu dị mfe. Vocoder nke dabeere na WaveGlow na-anọdụ n'usoro ọrụ ọdịyo-AI nke na-agbanwe okwu, egwu, na ụda maka nzikọrịta ozi, nnweta na mmepụta mgbasa ozi. Iji wulite nghọta miri emi, mesoo WaveGlow Flow-Dabere Vocoder dị ka ihe nlere anya na-arụ ọrụ, ọ bụghị otu njirimara: kọwaa nsonaazụ achọrọ, dokwuo anya echiche, wee kewaa ihe sistemụ nwere ike ime nke ọma na ihe ka chọrọ mkpebi ndị ọkachamara.

Na omume, ndị otu siri ike na-eji WaveGlow Flow-Dabere Vocoder na-emeso ịdịmma, nkwụsịtụ na nkwenye dị ka akụkụ dị mkpa nke atụmatụ mbugharị. Ha na-edepụta njirisi ịga nke ọma nke ọma, nwalee megide data ziri ezi yana usoro ọrụ, yana na-atụgharị dabere na usoro ọdịda ahụrụ karịa karịa mmeri otu oge. Nke a bụ ebe nghọta usoro ihe atụ na-atụgharị ka ọ bụrụ ike na-adịgide adịgide gafee ngwaahịa, amụma na arụmọrụ.

Ọ na-eme ka nnweta ya dịkwuo mma site na ndegharị, ịkọ akụkọ, na ntụgharị olu. N'otu oge ahụ, iji olu eme ihe n'ụzọ na-ezighị ezi na ihe egwu mpụta ga-abawanye mgbe nkwenye na-efu. Ụzọ kachasị na-agbanwe agbanwe bụ ijikọ ọsọ nnwale na ịdọ aka ná ntị ọchịchị: ndị na-anya ụgbọ elu, ijide ihe akaebe, bipụta ndekọ mkpebi, na na-aga n'ihu na-emelite nchekwa dị ka omume nlereanya, atụmanya ndị ọrụ, na ihe iwu chọrọ.

Mmetụta Strategic

Ọ na-eme ka nnweta ya dịkwuo mma site na ndegharị, ịkọ akụkọ, na ntụgharị olu.

Ọ na-eme ka nnweta ya dịkwuo mma site na ndegharị, ịkọ akụkọ, na ntụgharị olu. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.

Ndị otu mgbasa ozi nwere ike ibubata ọdịyo a na-egbu maramara ngwa ngwa site na iji obere mmefu ego.

Ndị otu mgbasa ozi nwere ike ibubata ọdịyo a na-egbu maramara ngwa ngwa site na iji obere mmefu ego. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.

Sistemụ na-eche ihu ndị ahịa nwere ike hazie mkparịta ụka n'ọtụtụ buru ibu.

Sistemụ na-eche ihu ndị ahịa nwere ike hazie mkparịta ụka n'ọtụtụ buru ibu. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.

Ọdịnihu nke Vocoder dabere na usoro WaveGlow

WaveGlow gosipụtara na vocoders na-asọ asọ dị ọcha nwere ike ịsọ mpi mma autoregressive, na-emetụta ọbịbịa na-esote yana ụdị ọdịyo dabara adaba. Ọ dị mfe ịnwụ otu ya ka na-adọrọ mmasị, n'agbanyeghị GAN vocoders dị ka HiFi-GAN ugbu a na-enwekarị mmeri na nha na ọsọ. Na-ele anya n'ihu, echiche dabere na mgbaba na ọsọ na-adaba na mgbasawanye ọgbara ọhụrụ-n'akụkụ TTS, na ụdị WaveGlow na-agbanwe agbanwe na-aga n'ihu na-agwa nyocha maka ọ ga-ekwe omume, njikwa, na ịrụ ọrụ nke ọma.

Mmejuputa n'ezie n'ụwa

Ijikọta ya na Tacotron 2 na pipeline TTS nke NVIDIA iji wepụta okwu dị mma nke studio

Ngwakọta okwu GPU ngwa ngwa maka ịkọ akụkọ, ndebanye aha, na usoro mmepụta ọdịnaya

Ịmepụta ọzụzụ na ihe ngosi ngosi na nyocha ebe a na-ahọrọ ọzụzụ kwụsiri ike, otu ọnwụ

Mmepụta olu nwere ike ime oge na sistemu mmekọrịta na-arụ na ngwaike NVIDIA

Usoro mmejuputa

Vocoder dabere na WaveGlow Flow na omume

Ijikọta ya na Tacotron 2 na pipeline TTS nke NVIDIA iji wepụta okwu dị mma nke studio.

Ijikọ ya na Tacotron 2 na NVIDIA's ntụaka TTS pipeline iji mepụta otu ndị na-ekwu okwu dị mma nke ọma na-enwetakarị nsonaazụ kacha mma mgbe ha kọwapụtara ọnụ ụzọ dị mma n'ihu, debe ụzọ mmụba mmadụ maka ikpe ọnụ, wee soro ma uru nrụpụta yana ụgwọ njehie na oge.

Vocoder dabere na WaveGlow Flow na omume

Ngwakọta okwu GPU ngwa ngwa maka ịkọ akụkọ, ndebanye aha, na usoro mmepụta ọdịnaya.

Ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa ngwa.

Vocoder dabere na WaveGlow Flow na omume

Ịmepụta ọzụzụ na ihe ngosi ngosi na nyocha ebe a na-ahọrọ ọzụzụ kwụsiri ike, otu ọnwụ.

Ịmepụta ọzụzụ na ihe ngosi ngosi na nyocha ebe a na-ahọrọ ọzụzụ kwụsiri ike, otu na-efu efu Otu dị iche iche na-enweta nsonaazụ kacha mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-eme ka ụzọ mmadụ si abawanye maka oke ikpe, ma soro ma uru nrụpụta yana ụgwọ njehie n'oge.

Vocoder dabere na WaveGlow Flow na omume

Mmepụta olu nwere ike ime oge na sistemu mmekọrịta na-arụ na ngwaike NVIDIA.

Mpụta ụda olu na-arụ ọrụ nke ọma na sistemụ mmekọrịta nke na-arụ ọrụ na NVIDIA ngwaike Teams na-enwetakarị nsonaazụ ka mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-eme ka ụzọ mmadụ na-ebuwanye ibu maka ikpe ikpe, ma soro ma uru nrụpụta na ụgwọ njehie na-aga n'ihu oge.

Ihe ize ndụ & okporo ụzọ nche

!

Iji olu eme ihe na ihe egwu mpụta ga-abawanye mgbe nkwenye na-efu.

!

Izi ezi nwere ike ịdaba n'ofe ụda olu, olumba ma ọ bụ gburugburu mkpọtụ.

!

Enwere ike imehie ọdịyo sịntetik dị ka ezigbo okwu na-enweghị akara doro anya.

Map mmejuputa

1

Nweta nkwenye doro anya maka ijide olu, imechi, na ijigharị.

Nweta nkwenye doro anya maka ijide olu, imechi, na ijigharị. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.

2

Nwale ogo n'ofe ndị na-ekwu okwu dị iche iche yana ọnọdụ ndabere.

Nwale ogo n'ofe ndị na-ekwu okwu dị iche iche yana ọnọdụ ndabere. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.

3

Kọwaa mgbe mmadụ ga-enyocha ma ọ bụ kwado nsonye.

Kọwaa mgbe mmadụ ga-enyocha ma ọ bụ kwado nsonye. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.

4

Deba aha ọdịyo sịntetik ma debe ndekọ ihe ndekọ maka ịza ajụjụ.

Deba aha ọdịyo sịntetik ma debe ndekọ ihe ndekọ maka ịza ajụjụ. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.

Nọgide na-eme nchọpụta