HAGAHA Audio AI

Jiilka Muusikada Kala Sarreysa ee MusicLM

MusicLM waa Google moodeka qoraalka-mususika kaas oo soo saara dhowr daqiiqo oo maqal ah oo isku xiran oo ka yimid sharraxaad sida 'laxan violin ah oo dejinaya oo uu taageerayo gitaarka qalloocan.

Dulmar

MusicLM waa Google qaab qoraal-mususi ah oo soo saara dhowr daqiiqo oo maqal ah oo isku xiran oo laga soo qaatay sharraxaad sida 'laxan violin ah oo dejinaya oo uu taageerayo gitaar qalloocan.' Waa arrin sababtoo ah waxay xallisay qaab-dhismeedka muusikadda fog-fog iyadoo ku ururinaysa moodallo heer sare ah, iyada oo ula dhaqmaysa jiilka muusiga sida luqadda oo lagu qaabeeyo calaamado maqal ah.

Jiilka Muusikada Heerarka ee MusicLM wuxuu ku fadhiyaa qulqulka shaqada maqalka-AI kaas oo beddela hadalka, muusiga, iyo codka isgaarsiinta, gelitaanka, iyo soosaarka warbaahinta.

quusitaanka qoto dheer

Waxaa ku dhawaaqay Google Cilmi baaris horraantii 2023, MusicLM waxay qaabaysaa jiilka muusiga sida saadaalinta taxanaha maqalka calamada, si la mid ah qaabka luqaddu u saadaaliyo erayada. Waxay isticmaashaa kala sarreynta matalaadda: calaamadaha semantic (oo laga soo qaatay qaabka loo yaqaan w2v-BERT) waxay qabtaan qaab-dhismeed heer sare ah sida laxanka iyo laxanka dhererka dheer, halka calaamadaha dhawaaqa (ee SoundStream neural codec) ay qabtaan faahfaahin fiican sida timbre iyo texture. Marxaladda koowaad waxay soo saartaa calaamado semantic ah isla markiiba qoraalka, ka dib marxaladaha dambe waxay buuxiyaan tafaasiisha dhawaaqa ku xidhan shuruudahaas. Qaboojinta qoraalka waxa ay ka timaadaa MuLM/MuLan, oo ah qoraal-musik oo wadajir ah oo ku dhex-jira si sharraxaad ah iyo dhul maqal ah oo isku meel ah. Habkani waxa uu u ogolaanayaa MusicLM in ay si muusiko ah u joogto daqiiqado halkii ay ka wareegi lahayd dhawr ilbiriqsi ka dib.

Aragtida Farsamada

Fikradda ugu muhiimsan waa kala-goynta qaab-dhismeedka laga soo bilaabo texture guud ahaan kala sarreynta calaamadda. Calaamadaha semantic-ka ee aan fiicneyn waa kuwo yar oo tartiib tartiib ah, marka Transformer-ku waxa uu qaabayn karaa foomka muddada dheer iyada oo aan lahayn dherer isku xigxig weyn. Calaamadaha acoustic waa cufan oo heer sare ah, laakiin waxay u baahan yihiin oo kaliya in lagu saadaaliyo shuruudo ku saabsan semantics horeba loo hagaajiyay, taas oo ka dhigaysa marxalad kasta. SoundStream's residual vector quantization's waxay soo saartaa koodh dhawaaqeed ee lakabka ah kaas oo codeeyaha kama dambaysta ahi uu dib ugu noqdo 24 kHz waveforms.

Farsamaynta Muusiga LM Jiilka Muusiga ee Kala Sarreeya

MusicLM waa Google qaab qoraal-mususi ah oo soo saara dhowr daqiiqo oo maqal ah oo isku xiran oo laga soo qaatay sharraxaad sida 'laxan violin ah oo dejinaya oo uu taageerayo gitaar qalloocan.' Waa arrin sababtoo ah waxay xallisay qaab-dhismeedka muusikadda fog-fog iyadoo ku ururinaysa moodallo heer sare ah, iyada oo ula dhaqmaysa jiilka muusiga sida luqadda oo lagu qaabeeyo calaamado maqal ah. Jiilka Muusikada Heerarka ee MusicLM wuxuu ku fadhiyaa qulqulka shaqada maqalka-AI kaas oo beddela hadalka, muusiga, iyo codka isgaarsiinta, gelitaanka, iyo soosaarka warbaahinta. Si loo dhiso faham qoto dheer, ula dhaqan Jiilka Muusikada Hierarchical MusicLM qaab hawleed, ma aha hal sifo: qeex natiijooyinka la rabo, cadee fikradaha, oo kala saar waxa nidaamku si kalsooni leh u samayn karo iyo waxa wali u baahan go'aan khabiir.

Ficil ahaan, kooxaha xoogga leh ee isticmaalaya Jiilka Muusikada Heerarka ee MusicLM waxay ula dhaqmaan tayada, daahitaanka, iyo oggolaanshaha sida qaybo muhiim ah oo isku mid ah oo ka mid ah istiraatiijiyadda geynta. Waxay diiwaangeliyaan shuruudaha guusha ee cad, tijaabiyaan xogta dhabta ah iyo qulqulka shaqada, waxayna ku celceliyaan ku saleysan qaababka guul darrida ee la arkay halkii ay hal mar ku guuleysan lahaayeen halbeegyada. Tani waa halka fahamka aragtida uu isu beddelo karti waara oo dhan badeecada, siyaasadda, iyo hawlgallada.

Waxay wanaajisaa marin u helida iyada oo loo marayo qoraal-qorid, sheeko, iyo is-dhexgalyo cod. Isla mar ahaantaana, si xun u isticmaalka codka iyo khataraha is-yeelyeelku way kordhaan marka oggolaanshaha la waayo. Habka ugu adkeysi badan waa in la isku daro xawaaraha tijaabada iyo anshaxa maamulka: socodsiinta duuliyayaasha, qabashada caddaynta, daabacaadda go'aanka, iyo si joogto ah u cusboonaysii ilaalinta sida habdhaqanka moodeelka, filashada isticmaale, iyo shuruudaha sharciyaynta.

Saamaynta Istiraatijiyadeed

Waxay wanaajisaa marin u helida iyada oo loo marayo qoraal-qorid, sheeko, iyo is-dhexgalyo cod.

Waxay wanaajisaa marin u helida iyada oo loo marayo qoraal-qorid, sheeko, iyo is-dhexgalyo cod. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Kooxaha warbaahintu waxay ku soo rari karaan codka sifaysan si degdeg ah iyagoo wata miisaaniyado yaryar.

Kooxaha warbaahintu waxay ku soo rari karaan codka sifaysan si degdeg ah iyagoo wata miisaaniyado yaryar. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Nidaamyada u jeedda macmiisha waxay ka baaraandegi karaan isdhexgalka hadalka si weyn.

Nidaamyada u jeedda macmiisha waxay ka baaraandegi karaan isdhexgalka hadalka si weyn. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Mustaqbalka Jiilka Muusikada Kala Sarreysa ee MusicLM

Habka kala sareynta ee MusicLM waxa uu noqday hab-raac loogu talagalay nidaamyada dambe sida MusicGen iyo agabka muusigga ganacsiga. Filo qaboojinta laxanka oo adag (hum a tune, hel habayn buuxda), heeso si buuxda u habaysan oo dheer oo leh tuducyo iyo heeso, iyo xakamayn fiican oo ku saabsan qalabka iyo furaha. Arrimaha qodxaha leh ayaa ah sharci iyo anshax: siinta xogta tababarka, ogolaanshaha farshaxanka, iyo calaamadaynta maqalka la sameeyay si loo kala saaro muusigga bani'aadamku sameeyay ayaa hadda udub dhexaad u ah hawlgelinta.

Dhaqangelinta Adduunka-dhabta ah

U beddelashada sharraxaadda goobta qoran oo loo beddelo filim ama buundada goos gooska, tusaale. 'dhis faneed heersare ah oo leh heeso'

Soo saarista muusiga asalka ah ee ku xidhan sawirka sawirka ama xitaa rinjiyeynta sharraxaadaha rakibaadda farshaxanka

Kordhinta laxan gaaban oo la tumay ama la foodhyay si loo habeeyo qalab dhamaystiran

Soo saarista heeso muusig oo kala duwan waqtiyo kala duwan iyo jawiyo xayaysiis iyo abuurayaal ka kooban

Hababka Dhaqangelinta

Jiilka muusiga ee kala sarraysa ee MusicLM ficil ahaan

U beddelashada sharraxaadda goobta qoran oo loo beddelo filim ama buundada goos gooska, tusaale. 'His Orchestral' oo leh heeso heeso ah.

U beddelashada sharraxaadda goobta qoran oo loo beddelo filim ama buundada goos gooska, tusaale. Kooxuhu waxay badanaa helaan natiijooyin ka wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u kaca bini'aadamka ee kiisaska cirifka ah, oo ay la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada qaladka waqti ka dib.

Jiilka muusiga ee kala sarraysa ee MusicLM ficil ahaan

Soo saarista muusiga asalka ah ee ku xidhan sawirka sawirka ama xitaa rinjiyeynta sharraxaadaha rakibaadda farshaxanka.

Soo saarista muusiga asalka ah ee ku xidhan sawirka sawirka ama xitaa rinjiyeynta sharraxaadaha rakibaadda farshaxanka Kooxuhu caadi ahaan waxay helayaan natiijooyin ka wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, oo ay la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada khaladka waqti ka dib.

Jiilka muusiga ee kala sarraysa ee MusicLM ficil ahaan

Kordhinta laxan gaaban oo la tumay ama la foodhyay si loo habeeyo qalab dhamaystiran.

Kordhinta laxan gaaban ama foori oo si buuxda loo qalabeeyey Kooxuhu waxay inta badan helaan natiijooyin ka wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, oo ay la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada khaladka waqti ka dib.

Jiilka muusiga ee kala sarraysa ee MusicLM ficil ahaan

Soo saarista heeso muusig oo kala duwan waqtiyo kala duwan iyo jawiyo xayaysiis iyo abuurayaal ka kooban.

Soo saarista heeso muusig oo kala duwan waqtiyo kala duwan iyo niyadda xayaysiisyada iyo abuurayaasha nuxurka Kooxuhu waxay caadi ahaan helaan natiijooyin ka wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, oo ay la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada khaladka waqti ka dib.

Khatarta & Dariiqyada Ilaalada

!

Si xun u isticmaalka codka iyo khataraha is-yeelyeelku way kordhaan marka oggolaanshaha la waayo.

!

Saxnimadu waxay hoos ugu dhici kartaa lahjadaha, lahjadaha, ama jawiga buuqa badan.

!

Maqalka synthetic waxaa lagu khaldi karaa hadal dhab ah iyada oo aan si cad loo calaamadin.

Dhaqangelinta Roadmapka

1

Hel ogolaansho cad oo ku saabsan qabashada codka, xidhitaanka, iyo dib u isticmaalka

Hel ogolaansho cad oo ku saabsan qabashada codka, xidhitaanka, iyo dib u isticmaalka Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

2

Tijaabi tayada ku hadasha kala duwan iyo xaaladaha asalka.

Tijaabi tayada ku hadasha kala duwan iyo xaaladaha asalka. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

3

Qeex marka bani'aadamku ay tahay inuu dib u eego ama oggolaado wax soo saarka.

Qeex marka bani'aadamku ay tahay inuu dib u eego ama oggolaado wax soo saarka. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

4

Ku calaamadee codka synthetic oo xafid diiwaannada la-xisaabtanka.

Ku calaamadee codka synthetic oo xafid diiwaannada la-xisaabtanka. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

Sii wad Sahaminta