Nchịkọta
DDSP (Differentiable Digital Signal Processing) na-eji netwọk akwara jikọtara ihe mgbochi synthesizer kpochapụwo, yabụ mmụta miri emi nwere ike ijikwa oscillators na nzacha ozugbo. Ọ na-emepụta ụda akụrụngwa na-enweghị atụ nke nwere obere ụdị yana obere data.
DDSP Disciable Audio Synthesis na-anọdụ n'usoro ọrụ ọdịyo-AI nke na-agbanwe okwu, egwu, na ụda maka nzikọrịta ozi, nnweta na mmepụta mgbasa ozi.
Ime miri emi
DDSP, nke ndị otu Magenta Google webatara na 2020, na-echegharịgharị ọgbọ ọdịyo akwara. Kama netwọk na-ebu amụma ihe nlele ọdịyo raw otu n'otu oge (dị ka WaveNet) ma ọ bụ pikselụ nke spectrogram, DDSP na-eme ihe DSP ọdịnala - ihe mgbakwunye oscillator na-emekọ ihe, onye na-emepụta ụda mkpọtụ, na reverb - dị iche. Nke ahụ pụtara na gradients nwere ike na-agafe na ha n'oge ọzụzụ, yabụ obere netwọkụ akwara na-amụta imepụta akara njikwa nwere ike ịkọwa: ụda isi, ụda n'ozuzu ya na njupụta nke ọtụtụ ihe kwekọrọ n'oge. A synthesizer wee sụgharịa n'ezie audio si na ndị a. N'ihi na a na-etinye physics nke ụda n'ime ihe owuwu kama ịmụta site na ọkọ, DDSP na-enweta ogo dị elu na obere parampat na ihe atụ ọzụzụ, ma na-ahapụ ndị ọrụ aka ịchịkwa ụda, ụda olu na timbre - ọbụna na-ebufe timbre, dị ka ịme ụda olu dị ka violin.
Nghọta nka nka
Ihe bụ isi bụ ihe nrụpụta ihe nlere anya dị iche iche: ụlọ akụ oscillator na-emekọ ihe na-ewepụta nchikota nke ebili mmiri sine na ọnụọgụ ọnụọgụ nke ugboro dị mkpa, ebe ụzọ dị iche na-enyocha mkpọtụ ọcha maka iku ume na textures inharmonic. Netwọk akwara anaghị ewepụta ụda ozugbo - ọ na-ewepụta usoro njikwa oge na-agbanwe agbanwe (f0, ụda olu, nkesa kwekọrọ, ọnụọgụ nzacha). Ọzụzụ na-eji mfu spectrogram dị ọtụtụ atụnyere ọdịyo ewepụtara na ebumnuche gafere n'ọtụtụ windo FFT, nke siri ike ruo n'iche dị n'usoro.
Ịkwalite DDSP Audio Synthesis dị iche iche
DDSP (Differentiable Digital Signal Processing) na-eji netwọk akwara jikọtara ihe mgbochi synthesizer kpochapụwo, yabụ mmụta miri emi nwere ike ijikwa oscillators na nzacha ozugbo. Ọ na-emepụta ụda akụrụngwa na-enweghị atụ nke nwere obere ụdị yana obere data. DDSP Disciable Audio Synthesis na-anọdụ n'usoro ọrụ ọdịyo-AI nke na-agbanwe okwu, egwu, na ụda maka nzikọrịta ozi, nnweta na mmepụta mgbasa ozi. Iji wulite nghọta miri emi, na-emeso DDSP Disciable Audio Synthesis dị ka ihe nlere anya na-arụ ọrụ, ọ bụghị otu njirimara: kọwaa nsonaazụ achọrọ, dokwuo anya echiche, ma kewaa ihe sistemụ nwere ike ime nke ọma na ihe ka chọrọ mkpebi ndị ọkachamara.
Na omume, otu ndị siri ike na-eji DDSP Differentiable Audio Synthesis na-ewere ịdịmma, ịla n'iyi, na nkwenye dị ka akụkụ dị mkpa nke atụmatụ mbughari. Ha na-edepụta njirisi ịga nke ọma nke ọma, nwalee megide data ziri ezi yana usoro ọrụ, yana na-atụgharị dabere na usoro ọdịda ahụrụ karịa karịa mmeri otu oge. Nke a bụ ebe nghọta usoro ihe atụ na-atụgharị ghọọ ike na-adịgide adịgide n'ofe ngwaahịa, amụma na arụmọrụ.
Ọ na-eme ka nnweta ya dịkwuo mma site na ndegharị, ịkọ akụkọ, na ntụgharị olu. N'otu oge ahụ, iji olu eme ihe n'ụzọ na-ezighị ezi na ihe egwu mpụta ga-abawanye mgbe nkwenye na-efu. Ụzọ kachasị na-agbanwe agbanwe bụ ijikọ ọsọ nnwale na ịdọ aka ná ntị ọchịchị: ndị na-anya ụgbọ elu, ijide ihe akaebe, bipụta ndekọ mkpebi, na na-aga n'ihu na-emelite nchekwa dị ka omume nlereanya, atụmanya ndị ọrụ, na ihe iwu chọrọ.
Mmetụta atụmatụ
Ọ na-eme ka nnweta ya dịkwuo mma site na ndegharị, ịkọ akụkọ, na ntụgharị olu.
Ọ na-eme ka nnweta ya dịkwuo mma site na ndegharị, ịkọ akụkọ, na ntụgharị olu. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Ndị otu mgbasa ozi nwere ike ibubata ọdịyo a na-egbu maramara ngwa ngwa site na iji obere mmefu ego.
Ndị otu mgbasa ozi nwere ike ibubata ọdịyo a na-egbu maramara ngwa ngwa site na iji obere mmefu ego. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Sistemụ na-eche ihu ndị ahịa nwere ike hazie mkparịta ụka n'ọtụtụ buru ibu.
Sistemụ na-eche ihu ndị ahịa nwere ike hazie mkparịta ụka n'ọtụtụ buru ibu. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Mmejuputa n'ezie n'ụwa
Ngwa mbufe timbre nke na-ewere egwu kụdara ma ọ bụ bụrụ abụ wee tụgharịa ya ka violin, ọjà ma ọ bụ opi ozugbo.
Ihe mgbakwunye akwara akwara dị fechaa nke ndị na-egwu egwu na-ejikwa n'ọkwa ụda mmetụta, ụda olu na nchapụta.
Ndozi-nzizi na nkwuputa resynthesis nke ngwa edekọtara ka ọ na-echekwa nkọwa nkwekọ nke okike.
Ngosi egwu mmekọrịta dabere na ihe nchọgharị na-emepụta ụda akụrụngwa na-enweghị ụdị GPU dị arọ.
Usoro mmejuputa
DDSP Synthesis Audio dị iche na omume
Ngwa mbufe timbre nke na-ewere egwu kụdara ma ọ bụ bụrụ abụ wee tụgharịa ya ka violin, ọjà ma ọ bụ opi ozugbo.
Ngwá ọrụ mbufe Timbre nke na-ewere hummed ma ọ bụ na-abụ abụ ma na-emegharị ya dị ka violin, ọjà, ma ọ bụ opi na ozugbo Ndị otu na-enwetakarị nsonaazụ ka mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-eme ka ụzọ mmadụ si abawanye maka ọnụ okwu, ma soro ma uru nrụpụta na ụgwọ njehie na oge.
DDSP Synthesis Audio dị iche na omume
Ihe mgbakwunye akwara akwara dị fechaa nke ndị na-egwu egwu na-ejikwa n'ọkwa ụda mmetụta, ụda olu na nchapụta.
Ihe mgbakwunye neural synthesizer dị fechaa nke ndị na-egwu egwu na-ejikwa ya na ụda nghọta, ụda olu na nchapụta Otu dị iche iche na-enweta nsonaazụ kacha mma mgbe ha kọwapụtara ọnụ ụzọ dị mma n'ihu, na-edobe ụzọ ịrị elu mmadụ maka ikpe ọnụ, ma soro ma uru nrụpụta yana ụgwọ njehie ka oge na-aga.
DDSP Synthesis Audio dị iche na omume
Ndozi-nzizi na nkwuputa resynthesis nke ngwa edekọtara ka ọ na-echekwa nkọwa nkwekọ nke okike.
Ndozi-ndozi na nkwuwapụta resynthesis nke ngwa ndị edekọtara ka ị na-echekwa nkọwa nkwekọ okike Otu dị iche iche na-enwetakarị nsonaazụ ka mma mgbe ha kọwapụtara ọnụ ụzọ dị mma n'ihu, na-edobe ụzọ ịrị elu mmadụ maka ikpe ọnụ, ma soro ma uru nrụpụta na ụgwọ njehie ka oge na-aga.
DDSP Synthesis Audio dị iche na omume
Ngosi egwu mmekọrịta dabere na ihe nchọgharị na-emepụta ụda akụrụngwa na-enweghị ụdị GPU dị arọ.
Ihe ngosi egwu mmekọrịta nke ihe nchọgharị na-emepụta ụda akụrụngwa na-enweghị ụdị GPU dị arọ Otu dị iche iche na-enweta nsonaazụ kacha mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-edebe ụzọ mmụba mmadụ maka ikpe ọnụ, ma soro ma uru nrụpụta yana ụgwọ njehie n'ime oge.
Ihe ize ndụ & okporo ụzọ nche
Iji olu eme ihe na ihe egwu mpụta ga-abawanye mgbe nkwenye na-efu.
Izi ezi nwere ike ịdaba n'ofe ụda olu, olumba ma ọ bụ gburugburu mkpọtụ.
Enwere ike imehie ọdịyo sịntetik dị ka ezigbo okwu na-enweghị akara doro anya.
Map mmejuputa
Nweta nkwenye doro anya maka ijide olu, imechi, na ijigharị.
Nweta nkwenye doro anya maka ijide olu, imechi, na ijigharị. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Nwale ogo n'ofe ndị na-ekwu okwu dị iche iche yana ọnọdụ ndabere.
Nwale ogo n'ofe ndị na-ekwu okwu dị iche iche yana ọnọdụ ndabere. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Kọwaa mgbe mmadụ ga-enyocha ma ọ bụ kwado nsonye.
Kọwaa mgbe mmadụ ga-enyocha ma ọ bụ kwado nsonye. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Deba aha ọdịyo sịntetik ma debe ndekọ ihe ndekọ maka ịza ajụjụ.
Deba aha ọdịyo sịntetik ma debe ndekọ ihe ndekọ maka ịza ajụjụ. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.