DiffWave Diffusion Vocoder
DiffWave waa codeeye ku salaysan faafin kaas oo soo saara codka isagoo si isdaba joog ah u diidaya qaylada random ee qaab mawjad, oo ku xidhan mel-spectrogram.
Dulmar
It brought diffusion models to high-fidelity speech, rivaling GANs and WaveNet without adversarial training.
quusid qoto dheer
DiffWave, oo ay soo bandhigtay Kong et al. sanadka 2020, waxay ku dabaqaysaa diidmada faafinta qaab dhismeedka moodeelka suurtogalka ah ee maqalka cayriin. Inta lagu jiro tababarka waxay si tartiib tartiib ah ugu daraa dhawaaqa Gaussian qaab mowjad nadiif ah tallaabooyin badan, ka dibna waxay bartaa shabakad si ay u saadaaliso ugana saarto qayladaas tallaabo kasta. Wakhtiga jiilka waxay ka bilaabataa sawaxan saafi ah waxayna waddaa habka rogaal celiska ah, iyadoo shuruud ku xidhan mel-spectrogram, si ay u soo kabsato hadal nadiif ah. Laf-dhabartu waa shabakad aan madax-bannaanayn, oo fidsan-convolution oo u eg WaveNet laakiin saadaalisa buuqa halkii laga qaadi lahaa muunado. DiffWave waxay la mid tahay cod-bixiyayaasha tayada leh oo si gaar ah u adag, xitaa soo saara hadal macquul ah oo shuruud la'aan ah iyo natiijooyin joogto ah dhammaan kuwa ku hadla. Ganacsiga ugu weyni waa xawli: muunada nafiska ah waxay u baahan tahay daraasiin ilaa kumanaan tillaabo ah, in kasta oo jadwalyada degdega ahi ay tan ka dhigaan wax yar ilaa lix.
Aragtida Farsamada
DiffWave waxay si toos ah u barataa jaan-goynta xogta qaybinta iyagoo tababaraya shabakad si ay u saadaaliso buuqa lagu daray tallaabo faafin random, iyadoo la adeegsanayo ujeedo fudud oo L2 ah. Muunad-qaadiddu waxay beddeshaa jadwalka qaylada go'an, iyo tirada tillaabooyinka waxay ka beddelaan tayada xawaaraha; cilmi-baarayaashu waxay heleen jadwal gaagaaban oo si taxadar leh loo doortay oo ilaa lix tallaabo ah ayaa ilaalinaya daacadnimada, iyagoo u rogaya geeddi-socod kun-tallaabo shay aad ugu dhow mid la taaban karo.
Saamaynta Istiraatijiyadeed
Helitaanka iyo gaarsiinta
Waxay wanaajisaa marin u helida iyada oo loo marayo qoraal-qorid, sheeko, iyo is-dhexgalyo cod.
Qiimaha iyo miisaaniyada
Kooxaha warbaahintu waxay ku soo rari karaan codka sifaysan si degdeg ah iyagoo wata miisaaniyado yaryar.
Xawaaraha iyo miisaanka
Nidaamyada u jeedda macmiisha waxay ka baaraandegi karaan isdhexgalka hadalka si weyn.
Mustaqbalka DiffWave Diffusion Vocoder
DiffWave wuxuu bilaabay codeeyayaasha faafinta iyo ku guulaysta dhaqsaha badan sida PriorGrad iyo FastDiff ee tirinta tirinta tirinta. Goobtu waxa ay ku soo ururtay farsamooyin-kala-saarid iyo farsamayn-is-dabo-joog ah kuwaas oo ujeeddadoodu tahay muuna samaynta faafinta hal-tallaabo, xidhitaanka farqiga xawaaraha ee cod-bixiyayaasha GAN iyada oo la ilaalinayo tababarka xasilloon ee faafinta iyo adkaanta. Filo fikradaha faafintu inay ku sii faafaan muusiga, codecs neural, iyo jiilka maqalka caalamiga ah halkaas oo daboolida qaabku khuseeyo.
Dhaqangelinta Adduunka-dhabta ah
Kalsooni sare oo neural qoraal-ku-hadal dhabarku dhammaado kaas oo ka fogaanaya tababbarka GAN aan degganayn
Jiilka hadalka shuruud la'aanta ah ee kordhinta xogta iyo cilmi baarista maqalka
Samaynta cod-ku-hadlid adag halkaas oo hal nooc uu si joogto ah u qabto codad badan
Gogol tijaabo ah oo loogu talagalay cilmi-baarista faafinta muunad-dhakhso leh, iyadoo lagu dabaqayo jadwal dhawaaq gaaban maqal-waqtiga dhabta ah
Khatarta & Dariiqyada Ilaalada
Si xun u isticmaalka codka iyo khataraha is-yeelyeelku way kordhaan marka oggolaanshaha la waayo.
Saxnimadu waxay hoos ugu dhici kartaa lahjadaha, lahjadaha, ama jawiga buuqa badan.
Maqalka synthetic waxaa lagu khaldi karaa hadal dhab ah iyada oo aan si cad loo calaamadin.
Qorshe Hawleedka Dhaqangelinta
Hel ogolaansho cad oo ku saabsan qabashada codka, xidhitaanka, iyo dib u isticmaalka
Tijaabi tayada ku hadasha kala duwan iyo xaaladaha asalka.
Qeex marka bani'aadamku ay tahay inuu dib u eego ama oggolaado wax soo saarka.
Ku calaamadee codka synthetic oo xafid diiwaannada la-xisaabtanka.
Sii wad Sahaminta
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the DiffWave Diffusion Vocoder quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Hagaha xiga
Faafinta Daahsoon ee Maqalka Deggan
Su'aalaha soo noqnoqda
What is DiffWave Diffusion Vocoder?
DiffWave waa codeeye ku salaysan faafin kaas oo soo saara codka isagoo si isdaba joog ah u diidaya qaylada random ee qaab mawjad, oo ku xidhan mel-spectrogram. Waxay u keentay moodooyinka fidinta hadalka daacadnimada sare, xafiiltanka GANs iyo WaveNet iyada oo aan lahayn tababbar iska soo horjeeda.
Sidee ayuu DiffWave u soo saaraa maqalka wakhtiga go'aanka?
DiffWave wuxuu ka bilaabmaa dhawaaqa Gaussian wuxuuna maamulaa habka faafinta gadaale, isagoo si isdaba joog ah u diidaya iyadoo shuruud ku xiran mel-spectrogram, si loo soo saaro qaabka hirarka.
Maxay shabakada DiffWave dhab ahaantii barataa inay saadaaliso inta lagu jiro tababarka?
DiffWave waxay tababartaa shabakad si ay u saadaaliso sanqadha Gaussian ee lagu daray tillaabo fidineed oo si aan kala sooc lahayn loo doortay, iyadoo la adeegsanayo luminta L2 miisaan leh.
Waa maxay cillada ugu weyn ee DiffWave marka la barbar dhigo codbixiyayaasha GAN?
Muunad faafinta naafaynta waxay u baahan tahay tillaabooyin badan oo gadaal ah; inkasta oo jadwalyada degdega ahi ay caawiyaan, habka soo noqnoqda ayaa ah qiimaha xawaaraha ugu weyn.
Waa maxay faa'iidada uu DiffWave ku leeyahay cod-bixiyayaasha GAN ee tababarka?
Moodooyinka faafinta waxaa lagu tababaray ujeedo degganaansho-qaab dib-u-noqosho ah, iyaga oo dhinac iska dhigaya xasillooni-darrada ay ku dhici karto tababarka GAN ee iska soo horjeeda.
Nashqada noocee ah ayay shabkada saadaasha qaylada DiffWave u shabahaa?
DiffWave waxay isticmaashaa laf-dhabarta aan autoregressive-ka ahayn ee is-faham la'aanta la mid ah WaveNet, laakiin waxay saadaalisaa buuqa halkii ay ka ahaan lahayd muunado maqal ah.