Samee-A-Video Qoraal-ku-Fiidiyow
Samee-A-Video waa nidaamka 2022_AIU_PROTECTED_13__ kaas oo u beddela qoraalka degdega ah muuqaal gaaban oo aan waligiis tababbar u lahayn lammaane qoraal-muuqaal ah oo calaamadeysan.
Dulmar
It matters because it showed that the visual knowledge inside text-to-image models could be 'taught' to move using only unlabeled video.
quusid qoto dheer
Samee-A-Video, waxaa ku dhawaaqay Meta AI Sebtembar 2022, waxa ay soo saartaa dhawr ilbiriqsi oo fiidiyoow ah jumlad sida 'Ey xidhan koofiyad heersare ah oo cirka dul duulaysa.' Xeeladdeeda muhiimka ah waa kala-soocidda muuqaalka dhaqdhaqaaqa: qaab qoraal-u-sawir ah (oo lagu dhisay qaab-dhismeedka CLIP-style-ka wadajirka ah ee qoraalka-sawirka iyo faafinta) waxay bartaa sida ay arrimuhu u egyihiin balaayiin sawirro qoraal ah, halka lakabyada spatiotemporal ee kala duwan ay bartaan sida arrimuhu uga guuraan fiidiyoow aan calaamad ahayn oo keliya. Tani waxay dhinac maraysa yaraanta lammaanaha qoraalka iyo muuqaalka tayada sare leh. Qaabka salku waxa uu soo saaraa xalal hoose, muuqaalo heer hoose ah, ka dibna shabakadaha u go'ay ayaa dhexgalaya fiimyo dheeri ah iyo xalin heersare ah. Natiijadu waxay ahayd mid si la yaab leh ula jaanqaadi karta waageedii, in kasta oo cajaladuhu ay ahaayeen kuwo gaaban, guduudan, oo u nugul liidashada iyo gariir.
Aragtida Farsamada
Samee-A-Video-ku wuxuu fidiyaa 2D-gacanka-jiilka sawirka iyo dareenka 3D isagoo ku daraya lakabyo-ku-meel-gaar ah. Miisaanka goobta ee horay loo tababaray waa la qaboojiyay ama si fiican loo hagaajiyay halka lakabyada cusub ee ku meel gaadhka ah ay ka bartaan dhaqdhaqaaqa fiidyaha cayriin, markaa looma baahna calaamado-muuqaal qoraal ah. Shabakadda isku-xidhka-dhex-dhexaadka ah waxay markaa cufaysaa wakhtiga iyo qaybaha fidinta-xalinta-sare waxay kor u qaadaan tafaasiisha goobta, iyaga oo u rogaya 16-jir ah, qabyo hoose-hooseeya mid siman, clip fiiqan oo ku dhex jira dhuumo cascad ah.
Saamaynta Istiraatijiyadeed
Xawaaraha iyo miisaanka
Visual AI wuxuu si otomaatig ah u samayn karaa baadhista, ogaanshaha, iyo sumadaynta hawlaha miisaanka.
Xulashada dhismayaasha
Kooxaha hal-abuurka leh waxay hindise karaan fikradaha si dhakhso leh iyagoo leh dib-u-eegis buugeed yar.
Kooxda iyo socodka shaqada
Hawlgalladu waxay isticmaali karaan calaamadaha muuqaalka iyo muuqaalka kuwaas oo markii hore adkeyd in la farsameeyo.
Mustaqbalka Samaynta-A-Video Qoraal-ku-Fiidiyow
Samee-A-Video-ka-hor-ka-hor-iyo-ka-soo-baxa-aan-calaamad-la'aanta-hab-ka-soo-baxa ayaa abuuray dhammaan mowjadaha qoraalka-ilaa-fidyaha. Faraceeda waxay xooga saaraan go'aan dheer, qaraar sare, fiilooyinka si ku meel gaadh ah u xasiloon oo leh dhaqdhaqaaq kamarad la xakamayn karo iyo maqal. Filo fikradda asaasiga ah, dib-u-isticmaalka aqoonta sawirka weyn iyo barashada dhaqdhaqaaqa raqiis ah, inay sii socoto xitaa iyadoo naqshaduhu u wareegayaan fidinta daahsoon ee ku salaysan beddelka iyo moodooyinka midaysan ee sidoo kale aqbala qaboojinta sawirka ama fiidiyoowga tafatirka iyo sii wadida.
Dhaqangelinta Adduunka-dhabta ah
Abuuritaanka hal jumlad oo qeexitaan ah oo loo geliyo goos goos gaaban oo loogu talagalay barta warbaahinta bulshada
Keenista fikrad taagan sida ' orso orso rinjiyeynta sawir ' nolosha sidii sawir dhaqaajinaysa
Is-dhex-galka u dhexeeya laba sawir oo adeegsaduhu keenay si loo abuuro muuqaal kala-guur oo siman
Abuurista qoraallo dhaq-dhaqaaq degdeg ah oo muuqaallo la mala awaalay oo loogu talagalay sheeko-xariifeedka ka hor duubis kasta
Khatarta & Dariiqyada Ilaalada
Xuquuqda sawirka iyo ogolaanshaha waxay noqon kartaa khataro sharci ah haddii caddayntu aanay caddayn.
Waxqabadka moodeelku wuu ku kala duwanaan karaa iftiinka, tirakoobka, iyo deegaanka.
Wanaagga beenta ah waxa laga yaabaa inaan la dareemin ilaa xadka kalsoonida aan la kormeerin.
Qorshe Hawleedka Dhaqangelinta
Qeex shuruudaha aqbalida ee saxnaanta, dib u celinta, iyo kharashyada khaladka.
Ku tijaabi xogta ku habboon xaaladaha wax soo saarka dhabta ah.
Ku dar dib u eegis bini'aadamka si aad u hesho kalsoonida hoose ama saameeynta sare.
Lasoco moodeel dhaqaaqa oo dib u cusboonaysii kamarada ama xogta kaydinta ka dib.
Sii wad Sahaminta
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Make-A-Video Text-to-Video quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Hagaha xiga
Sora iyo Qoraal-muuqaal
Su'aalaha soo noqnoqda
What is Make-A-Video Text-to-Video?
Samee-A-Video waa nidaamka 2022_AIU_PROTECTED_13__ kaas oo u beddela qoraalka degdega ah muuqaal gaaban oo aan waligiis tababbar u lahayn lammaane qoraal-muuqaal ah oo calaamadeysan. Waa arrin sababtoo ah waxay muujisay in aqoonta muuqaalka gudaha moodooyinka qoraalka-u-sawir laga yaabo in 'la baro' si loo dhaqaaqo iyadoo la adeegsanayo kaliya muuqaal aan calaamad lahayn.
Maxay ahayd hal-abuurnimada udub-dhexaadka u ah Samaynta-A-Video-ga inay iska ilaaliso u baahidda lammaane-muuqaal-qoraal ah oo calaamadeysan?
Samee-A-Video-ga waxa uu furfuraa mushkiladda: qaabka qoraalka-u-sawirku waxa uu bartaa sida ay arrimuhu u eg yihiin sawirrada qoraalka ah, halka lakabyada ku meel gaadhka ah ee kala duwani ay dhaqdhaqaaqa ka bartaan muuqaal cayriin ah, oo aan calaamadayn.
Sidee Samee-A-Video ku daraa awoodda dhaqdhaqaaqa qaabka sawirka?
Waxay ku fidinaysaa 2D convolutions spatial convolutions iyo fiiro gaar ah leh lakabyo ku meel gaar ah oo cusub oo baranaya sida nuxurku isu bedelo wakhti ka dib.
Waa maxay is-dhex-galka shaxanka iyo heerarka xallinta sare?
Ka bacdi qabyo hoose oo aan fiicneyn, heer hoose oo qabyo ah, isdhexgalku wuxuu ku darayaa xirmooyin iyo cutubyada xallinta sare waxay sare u qaadaan xallinta.
Maxay ahayd xaddidaadda caadiga ah ee wax-soo-saarka Make-A-Video?
Muuqaaladu waxay ahaayeen dhowr ilbiriqsi oo keliya, xallintooduna aad u hoosayso, waxayna u nugul yihiin liidashada iyo qalloocinta.