Nchịkọta
Riffusion bụ mbanye anataghị ikike nke na-ewepụta egwu site n'imeso ụda dị ka eserese: ọ na-emegharị ihe oyiyi Stable Diffusion ka ọ na-ese spectrograms, wee gbanwee onyonyo ndị ahụ ka ọ bụrụ ọdịyo. Ọ dị mkpa n'ihi na ọ na-egosi ngwá ọrụ e wuru maka otu ọkara (ihe oyiyi) nwere ike ịmepụta ọzọ (egwu) na ọ fọrọ nke nta ka ọ bụrụ ihe ọhụrụ ọ bụla.
Riffusion Spectrogram Diffusion na-anọdụ n'usoro ọdịyo-AI nke na-agbanwe okwu, egwu, na ụda maka nzikọrịta ozi, nnweta na mmepụta mgbasa ozi.
Ime miri emi
Riffusion, nke Seth Forsgren na Hayk Martiros weputara na ngwụcha 2022, malitere dị ka ọrụ ntụrụndụ. Isi aghụghọ: spectrogram bụ onyonyo 2D ebe axis kwụ ọtọ bụ oge, axis kwụ ọtọ bụ ugboro, na nchapụta pixel bụ oke. Ebe ọ bụ Stable Diffusion ewepụtala onyonyo site na mkpali ederede, ndị okike deziri ya nke ọma na puku kwuru puku ihe atụ ederede spectrogram jikọtara ọnụ. Jiri 'funky jazz bass' kpalite ya ma ọ na-ekwupụta mkpọtụ enweghị usoro n'ime spectrogram nke ụda ahụ. Iji mee ọdịyo enwere ike ịkpọ, Riffusion na-eme spectrogram ahụ site na Griffin-Lim algọridim nke na-ewughachi ozi oge na-efu efu. N'ihi na mgbasa ozi nwere ike imekọrịta nke ọma n'etiti mkpali, Riffusion nwekwara ike gbanwee otu ụdị ka ọ bụrụ nke ọzọ karịa vidiyo na-aga n'ihu, na-agbagharị n'enweghị nsogbu.
Nghọta nka nka
Riffusion na-ejighachi pipeline mgbasa ozi latent anaghị agbanwe agbanwe: U-Net na-ewepụ mkpọtụ Gaussian n'otu ntabi anya na onyonyo CLIP etinyere. Naanị ọrụ a kapịrị ọnụ ngalaba bụ ihe nnọchi anya spectrogram (mel-scale, log power) na nrụgharị oge Griffin-Lim nke na-atụgharị spectrogram dị ukwuu e buru n'amụma laghachi azụ n'ụdị ifegharị. A na-atụfu usoro n'oge itinye koodu, yabụ ntule ntule nke Griffin-Lim bụ isi mmalite nke njirimara 'mmiri'.
Nnabata Riffusion Spectrogram Mgbasa
Riffusion bụ mbanye anataghị ikike nke na-ewepụta egwu site n'imeso ụda dị ka eserese: ọ na-emegharị ihe oyiyi Stable Diffusion ka ọ na-ese spectrograms, wee gbanwee onyonyo ndị ahụ ka ọ bụrụ ọdịyo. Ọ dị mkpa n'ihi na ọ na-egosi ngwá ọrụ e wuru maka otu ọkara (ihe oyiyi) nwere ike ịmepụta ọzọ (egwu) na ọ fọrọ nke nta ka ọ bụrụ ihe ọhụrụ ọ bụla. Riffusion Spectrogram Diffusion na-anọdụ n'usoro ọdịyo-AI nke na-agbanwe okwu, egwu, na ụda maka nzikọrịta ozi, nnweta na mmepụta mgbasa ozi. Iji wulite nghọta miri emi, na-emeso Riffusion Spectrogram Diffusion dị ka ihe nlere anya na-arụ ọrụ, ọ bụghị otu njirimara: kọwaa nsonaazụ achọrọ, dokwuo anya echiche, kewaa ihe sistemụ nwere ike ime nke ọma na ihe ka na-achọ mkpebi ndị ọkachamara.
Na omume, ndị otu siri ike na-eji Riffusion Spectrogram Diffusion na-emeso ịdịmma, nkwụsịtụ, na nkwenye dị ka akụkụ dị mkpa nke atụmatụ mbugharị. Ha na-edepụta njirisi ịga nke ọma nke ọma, nwalee megide data ziri ezi yana usoro ọrụ, yana na-atụgharị dabere na usoro ọdịda ahụrụ karịa karịa mmeri otu oge. Nke a bụ ebe nghọta usoro ihe atụ na-atụgharị ka ọ bụrụ ike na-adịgide adịgide gafee ngwaahịa, amụma na arụmọrụ.
Ọ na-eme ka nnweta ya dịkwuo mma site na ndegharị, ịkọ akụkọ, na ntụgharị olu. N'otu oge ahụ, iji olu eme ihe n'ụzọ na-ezighị ezi na ihe egwu mpụta ga-abawanye mgbe nkwenye na-efu. Ụzọ kachasị na-agbanwe agbanwe bụ ijikọ ọsọ nnwale na ịdọ aka ná ntị ọchịchị: ndị na-anya ụgbọ elu, ijide ihe akaebe, bipụta ndekọ mkpebi, na na-aga n'ihu na-emelite nchekwa dị ka omume nlereanya, atụmanya ndị ọrụ, na ihe iwu chọrọ.
Mmetụta Strategic
Ọ na-eme ka nnweta ya dịkwuo mma site na ndegharị, ịkọ akụkọ, na ntụgharị olu.
Ọ na-eme ka nnweta ya dịkwuo mma site na ndegharị, ịkọ akụkọ, na ntụgharị olu. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Ndị otu mgbasa ozi nwere ike ibubata ọdịyo a na-egbu maramara ngwa ngwa site na iji obere mmefu ego.
Ndị otu mgbasa ozi nwere ike ibubata ọdịyo a na-egbu maramara ngwa ngwa site na iji obere mmefu ego. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Sistemụ na-eche ihu ndị ahịa nwere ike hazie mkparịta ụka n'ọtụtụ buru ibu.
Sistemụ na-eche ihu ndị ahịa nwere ike hazie mkparịta ụka n'ọtụtụ buru ibu. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Mmejuputa n'ezie n'ụwa
Na-emepụta egwu ndabere dị mkpụmkpụ maka egwuregwu vidiyo indie site na ngwa ngwa ederede dị ka 'tense synthwave chase'
Morphing were were were n'etiti ụdị egwu abụọ, dịka. na-agwakọta 'ụlọ okpomọkụ' n'ime 'lo-fi hip hop' n'ofe otu vidiyo
Na-emepụta akwa egwu ihe nkiri na-enweghị eze maka vidiyo YouTube na pọdkastị na-enweghị ụgwọ ikike
Ntugharị egwu egwu ma ọ bụ echiche rhythmic nke onye egwu na-edegharịghachi nke ọma na ebe a na-eme ọdịyo dijitalụ.
Usoro mmejuputa
Riffusion Spectrogram Mgbasa na omume
Na-emepụta egwu ndabere dị mkpụmkpụ maka egwuregwu vidiyo indie site na ngwa ngwa ederede dị ka 'tense synthwave chase'.
Ịmepụta egwu ndabere dị mkpụmkpụ maka egwuregwu vidiyo indie site na ngwa ngwa ederede dị ka 'tense synthwave chase' Otu dị iche iche na-enwetakarị nsonaazụ kacha mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-edebe ụzọ mmụba mmadụ maka ikpe ọnụ, ma soro ma uru nrụpụta yana ụgwọ njehie n'ime oge.
Riffusion Spectrogram Mgbasa na omume
Morphing were were were n'etiti ụdị egwu abụọ, dịka. na-agwakọta 'ụlọ okpomọkụ' n'ime 'lo-fi hip hop' n'ofe otu vidiyo.
Morphing were were were n'etiti ụdị egwu abụọ, dịka. ịgwakọta 'ụlọ okpomọkụ' n'ime 'lo-fi hip hop' n'ofe otu clip Otu dị iche iche na-enwetakarị nsonaazụ ka mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-eme ka ụzọ mmadụ si abawanye maka oke ikpe, ma soro ma uru nrụpụta na ụgwọ njehie na-ewe oge.
Riffusion Spectrogram Mgbasa na omume
Na-emepụta akwa egwu ihe nkiri na-enweghị eze maka vidiyo YouTube na pọdkastị na-enweghị ụgwọ ikike.
Ịmepụta akwa egwu ambient na-enweghị eze maka vidiyo YouTube na pọdkastị na-enweghị ụgwọ ikike ikike Otu dị iche iche na-enwetakarị nsonaazụ kacha mma mgbe ha kọwapụtara ọnụ ụzọ dị mma n'ihu, na-eme ka ụzọ mmadụ si abawanye maka ikpe ikpe, ma soro ma uru nrụpụta yana ụgwọ njehie n'ime oge.
Riffusion Spectrogram Mgbasa na omume
Ntugharị egwu egwu ma ọ bụ echiche dị egwu nke onye egwu na-edegharịghachi nke ọma na ebe ọrụ ọdịyo dijitalụ.
Prototyping ụda olu ma ọ bụ echiche rhythmic nke onye na-egwu egwu na-edeghachi nke ọma na ebe a na-arụ ọrụ ọdịyo dijitalụ Ndị otu na-enwetakarị nsonaazụ kacha mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-eme ka ụzọ mmadụ si abawanye maka ọnụ okwu, ma soro ma uru nrụpụta yana ụgwọ njehie ka oge na-aga.
Ihe ize ndụ & okporo ụzọ nche
Iji olu eme ihe na ihe egwu mpụta ga-abawanye mgbe nkwenye na-efu.
Izi ezi nwere ike ịdaba n'ofe ụda olu, olumba ma ọ bụ gburugburu mkpọtụ.
Enwere ike imehie ọdịyo sịntetik dị ka ezigbo okwu na-enweghị akara doro anya.
Map mmejuputa
Nweta nkwenye doro anya maka ijide olu, imechi, na ijigharị.
Nweta nkwenye doro anya maka ijide olu, imechi, na ijigharị. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Nwale ogo n'ofe ndị na-ekwu okwu dị iche iche yana ọnọdụ ndabere.
Nwale ogo n'ofe ndị na-ekwu okwu dị iche iche yana ọnọdụ ndabere. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Kọwaa mgbe mmadụ ga-enyocha ma ọ bụ kwado nsonye.
Kọwaa mgbe mmadụ ga-enyocha ma ọ bụ kwado nsonye. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Deba aha ọdịyo sịntetik ma debe ndekọ ihe ndekọ maka ịza ajụjụ.
Deba aha ọdịyo sịntetik ma debe ndekọ ihe ndekọ maka ịza ajụjụ. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.