Dulmar
SoundStorm waa Google moodeel maqal maqal ah oo soo saara hadalka iyo dhawaaqa isbarbar socda halkii uu ka ahaan lahaa hal calaamad markiiba, taasoo samaynaysa isku xidh maqal oo tayo sare leh si xawli ah. Waa arrin sababtoo ah waxay gooysaa daahitaanka jiilka ee cajaladaha dheer ee daqiiqado ilaa ilbiriqsi iyada oo aan loo hurayn daacadnimada.
SoundStorm Parallel Audio Generation wuxuu ku fadhiyaa qulqulka shaqada ee maqalka-AI kaasoo beddela hadalka, muusiga, iyo codka isgaarsiinta, gelista, iyo soosaarka warbaahinta.
quusitaanka qoto dheer
SoundStorm, oo uu soo bandhigay Google sanadka 2023, waxay soo saartaa maqal u taagan sida calaamado cod-bixineed oo kala duwan oo ka socda koodka neerfaha ee loo yaqaan SoundStream. Moodooyinka hore sida AudioLM waxay soo saareen calaamadahan si toos ah, iyagoo saadaaliyay calaamad kasta oo isku xigta, taas oo gaabis ah maqal dheer. SoundStorm beddelkeeda waxay isticmaashaa hab aan toos ahayn, oo waji-xidho ku salaysan oo laga soo amaahday moodooyinka jiilka sawirka sida MaskGIT. Waxay ku bilaabataa calaamado badan oo la daboolay oo si isdabajoog ah u buuxinaya in ka badan sacab muggiis oo tillaabooyinka dejinta ah, iyada oo saadaalisa calaamado badan oo isku mid ah. Ku xiran calaamadaha semantic (laga bilaabo moodeel sida AudioLM ama SPEAR-TTS), waxay ku dhejin kartaa 30 ilbiriqsi oo wada-hadal dabiici ah qiyaastii nus ilbiriqsi TPU, qiyaastii 100 jeer ka dhakhso badan saldhigyada asaasiga ah iyada oo la waafajinayo tayada iyo joogteynta hadalka.
Aragtida Farsamada
SoundStorm wuxuu qaabeeyaa heerarka kala sareynta ee cabbirka vector-ka (RVQ) ee ka imanaya SoundStream. Inta lagu jiro tababarka, calaamadaha random waa la daboolaa oo moodelku wuxuu bartaa inuu saadaaliyo. Marka la eego waxay ku shaqaysaa dejinta isbarbar-dhigga kalsoonida: mar kasta oo soo noqnoqonaysa waxay saadaalisaa dhammaan calaamadaha daboolan, waxay ilaalisaa kuwa ugu kalsoonida badan, oo dib u daboola inta kale. Waxay kala saartaa heerarka RVQ ee aan fiicneyn marka hore, ka dibna kuwa ka sii fiican, iyadoo ku gaareysa maqal buuxa tallaabooyin aad uga yar marka loo eego jiilka calaamad-sumadda.
Hagaajinta Jiilka Maqalka Barbaarta ee SoundStorm
SoundStorm waa Google moodeel maqal maqal ah oo soo saara hadalka iyo dhawaaqa isbarbar socda halkii uu ka ahaan lahaa hal calaamad markiiba, taasoo samaynaysa isku xidh maqal oo tayo sare leh si xawli ah. Waa arrin sababtoo ah waxay gooysaa daahitaanka jiilka ee cajaladaha dheer ee daqiiqado ilaa ilbiriqsi iyada oo aan loo hurayn daacadnimada. SoundStorm Parallel Audio Generation wuxuu ku fadhiyaa qulqulka shaqada ee maqalka-AI kaasoo beddela hadalka, muusiga, iyo codka isgaarsiinta, gelista, iyo soosaarka warbaahinta. Si loo dhiso faham qoto dheer, ula dhaqan SoundStorm Parallel Audio Generation qaab hawleed, ma aha hal sifo: qeex natiijooyinka la rabo, cadee fikradaha, oo kala saar waxa nidaamku si kalsooni leh u qaban karo iyo waxa wali u baahan go'aan khabiir.
Ficil ahaan, kooxaha xoogga leh ee isticmaalaya SoundStorm Parallel Audio Generation waxay ula dhaqmaan tayada, daahitaanka, iyo oggolaanshaha sida qaybo muhiim ah oo isku mid ah oo ka mid ah istiraatiijiyadda geynta Waxay diiwaangeliyaan shuruudaha guusha ee cad, tijaabiyaan xogta dhabta ah iyo qulqulka shaqada, waxayna ku celceliyaan ku saleysan qaababka guul darrida ee la arkay halkii ay hal mar ku guuleysan lahaayeen halbeegyada. Tani waa halka fahamka aragtida uu isu beddelo karti waara oo dhan badeecada, siyaasadda, iyo hawlgallada.
Waxay wanaajisaa marin u helida iyada oo loo marayo qoraal-qorid, sheeko, iyo is-dhexgalyo cod. Isla mar ahaantaana, si xun u isticmaalka codka iyo khataraha is-yeelyeelku way kordhaan marka oggolaanshaha la waayo. Habka ugu adkeysi badan waa in la isku daro xawaaraha tijaabada iyo anshaxa maamulka: socodsiinta duuliyayaasha, qabashada caddaynta, daabacaadda go'aanka, iyo si joogto ah u cusboonaysii ilaalinta sida habdhaqanka moodeelka, filashada isticmaale, iyo shuruudaha sharciyaynta.
Saamaynta Istiraatijiyadeed
Waxay wanaajisaa marin u helida iyada oo loo marayo qoraal-qorid, sheeko, iyo is-dhexgalyo cod.
Waxay wanaajisaa marin u helida iyada oo loo marayo qoraal-qorid, sheeko, iyo is-dhexgalyo cod. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.
Kooxaha warbaahintu waxay ku soo rari karaan codka sifaysan si degdeg ah iyagoo wata miisaaniyado yaryar.
Kooxaha warbaahintu waxay ku soo rari karaan codka sifaysan si degdeg ah iyagoo wata miisaaniyado yaryar. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.
Nidaamyada u jeedda macmiisha waxay ka baaraandegi karaan isdhexgalka hadalka si weyn.
Nidaamyada u jeedda macmiisha waxay ka baaraandegi karaan isdhexgalka hadalka si weyn. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.
Dhaqangelinta Adduunka-dhabta ah
Soo saarista 30-ilbiriqsi ee wada hadal lagu hadlo ee caawiyayaasha codka AI hal ilbidhiqsi gudahood
Isku-dubbarid wada-hadallo-rogmado badan leh oo leh codad ku-hadlo joogto ah si loo habeeyo
Ku-xoojinta qoraalka-hadalka-hadalka-hooseeya ee wakiilada is-dhex-galka ah halkaasoo moodooyinka autoregressive-ka ah ay daahmeen
Soo saarida qaab dheer oo maqal ah oo laga sheekeeyay si dhakhso ah iyadoo la buuxinayo calaamadaha dhawaaqa ee barbar socda
Hababka Dhaqangelinta
Jiilka maqalka ee isku midka ah ee SoundStorm ficil ahaan
Soo saarista 30-ilbiriqsi ee wada hadal lagu hadlo ee caawiyayaasha codka AI hal ilbidhiqsi gudahood.
Abuurista wada-hadallada 30-labaad ee lagu hadlo ee caawiyayaasha codka AI ee ka hooseeya kooxaha labaad waxay caadi ahaan helaan natiijooyin wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, oo la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada khaladka waqti ka dib.
Jiilka maqalka ee isku midka ah ee SoundStorm ficil ahaan
Isku-dubbarid wada-hadallo-rogmado badan leh oo leh codad ku-hadlo joogto ah si loo habeeyo.
Isku-dubarid wada-hadallo-rogmado badan leh oo leh codad-ku-hadleysi joogto ah oo loogu talagalay soo-saarista kooxuhu waxay caadi ahaan helaan natiijooyin wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida aadanaha ee kiisaska cirifka ah, oo ay la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada khaladka waqti ka dib.
Jiilka maqalka ee isku midka ah ee SoundStorm ficil ahaan
Ku-xoojinta qoraalka-hadalka-hadalka-hooseeya ee wakiilada is-dhex-galka ah halkaasoo moodooyinka autoregressive-ka ah ay daahmeen.
Ku-xoojinta qoraalka-hadalka hoose ee wakiilada is-dhexgalka halkaasoo moodooyinka is-difaacida ah ay kooxuhu caadi ahaan helaan natiijooyin wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadista bini'aadamka ee kiisaska cirifka ah, oo la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada khaladka waqti ka dib.
Jiilka maqalka ee isku midka ah ee SoundStorm ficil ahaan
Soo saarida qaab dheer oo maqal ah oo laga sheekeeyay si dhakhso ah iyadoo la buuxinayo calaamadaha dhawaaqa ee barbar socda.
Soo saarista qaab dheer oo maqal ah oo si dhakhso ah loo soo saaro iyada oo la buuxinayo calaamadaha dhawaaqa ee kooxaha isbar-barya sida caadiga ah waxay helayaan natiijooyin ka wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, iyo la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada khaladka waqti ka dib.
Khatarta & Dariiqyada Ilaalada
Si xun u isticmaalka codka iyo khataraha is-yeelyeelku way kordhaan marka oggolaanshaha la waayo.
Saxnimadu waxay hoos ugu dhici kartaa lahjadaha, lahjadaha, ama jawiga buuqa badan.
Maqalka synthetic waxaa lagu khaldi karaa hadal dhab ah iyada oo aan si cad loo calaamadin.
Qorshe Hawleedka Dhaqangelinta
Hel ogolaansho cad oo ku saabsan qabashada codka, xidhitaanka, iyo dib u isticmaalka
Hel ogolaansho cad oo ku saabsan qabashada codka, xidhitaanka, iyo dib u isticmaalka Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.
Tijaabi tayada ku hadasha kala duwan iyo xaaladaha asalka.
Tijaabi tayada ku hadasha kala duwan iyo xaaladaha asalka. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.
Qeex marka bani'aadamku ay tahay inuu dib u eego ama oggolaado wax soo saarka.
Qeex marka bani'aadamku ay tahay inuu dib u eego ama oggolaado wax soo saarka. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.
Ku calaamadee codka synthetic oo xafid diiwaannada la-xisaabtanka.
Ku calaamadee codka synthetic oo xafid diiwaannada la-xisaabtanka. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.