Xiga xigaHagaha xiga
Qiyaasta Qoto dheer ee Monocular
Muuqaal AI
Hagaha AI ee Muuqaalka
Qiyaasta Qoto dheer ee Faafinta Marigold
Marigold waxay dib u soo celisaa qaabka fidinta muuqaalka jiilka hore loo tababaray (Stable Diffusion) si loo saadaaliyo khariidado qoto dheer oo aad u faahfaahsan.
Dhageyso hagahanAI-waa laga sheekeeyay · ~2 min
Boggaan2 daqiiqo akhri
Dulmar
It shows you can turn a generator's rich visual knowledge into a precise perception tool with surprisingly little training data.
quusid qoto dheer
Marigold (ETH Zurich, CVPR 2024 ugu Wanaagsan Warqadda Sharafta leh) waxay dib u habaynaysaa qiyaasta qoto dheer sidii mushkilad jiileed shuruudaysan. Halkii laga tababari lahaa shabakad qoto dheer oo xoqan, waxay si fiican u habaynaysaa Stable Diffusion si ay 'u dhaliso' khariidad qoto dheer oo shardi ku ah sawirka gelinta. Aragtida ayaa ah in qaabka loo tabobaray soo saarista sawirada sawir-qaadista uu horay u bartay joomatari muuqaalka, nalka, iyo qaab-dhismeedka qoto dheer ee meesheeda qarsoon, sida saxda ah ee hore waxtar u leh qoto dheer. Waxa cajiib ah, Marigold si fiican ayaa loogu habeeyay kaydka xogta synthetic oo kaliya (sida Hypersim iyo Virtual KITTI) wali si fiican ayey u soo koobtay sawirada dhabta ah eber-shot. Waxay soo saartaa qoto dheer oo qaraabo ah oo aan kala sooc lahayn oo leh tafaasiil aad u fiican, in kasta oo diidmada soo noqnoqota ay ka dhigayso mid ka gaabis ah moodooyinka horay u sii quudinta sida DepthAnything.
Dhaqangelinta Adduunka-dhabta ah
Ka soo saarida qoto-dheer ee qoto dheer ee sawirada qaab dhismeedka iyo alaabada ee iftiiminta iyo majaajilada 3D.
Abuurista khariidado qoto dheer oo tafatiran oo loo isticmaalo qaboojinta sawirka la xakameyn karo iyo jiilka fiidyaha.
Aflaanta caawinta iyo kooxaha VFX ee ku jira matte iyo parallax waxay ka shaqeeyaan meelaha saxda ah ee muhiimka ah.
U adeega sida gundhig cilmi baadhiseed oo tusinaysa sida loo waafajiyo wax-soo-saarka kahor hawlaha saadaasha cufan.
Mustaqbalka Qiyaasta Qoto dheer ee Faafinta Marigol
Cunto karinta Marigold, hagaajinta fidinta fidinta hore ee saadaasha cufan, waa mid guud ka baxsan qoto dheer ilaa heerka caadiga ah ee dusha sare, qudhunka muuqaalka gudaha, iyo qiyaasta alaabta. Kala duwanaanshaha moodeelka dhaqsaha badan iyo joogteynta ayaa xiraya farqiga xawaaraha ee shabakadaha gudbinta quudinta, taasoo ka dhigaysa fidinta ku saleysan fidinta aaladaha isdhexgalka. Filo isbeddel ballaadhan oo hal laf dhabarta wax-soo-saarka ee horay loo tababbaray lagu habeeyey joomatari iyo hawlo aragtiyeed badan, yaraynta baahida hawlo-gaar ah oo calaamadaysan.
Ku dhaqangelinta
Maxay muhiim u tahay
- Xawaaraha iyo miisaanka. Visual AI wuxuu si otomaatig ah u samayn karaa baadhista, ogaanshaha, iyo sumadaynta hawlaha miisaanka.
- Xulashada dhismayaasha. Kooxaha hal-abuurka leh waxay hindise karaan fikradaha si dhakhso leh iyagoo leh dib-u-eegis buugeed yar.
- Kooxda iyo socodka shaqada. Hawlgalladu waxay isticmaali karaan calaamadaha muuqaalka iyo muuqaalka kuwaas oo markii hore adkeyd in la farsameeyo.
Iska ilaali
- Xuquuqda sawirka iyo ogolaanshaha waxay noqon kartaa khataro sharci ah haddii caddayntu aanay caddayn.
- Waxqabadka moodeelku wuu ku kala duwanaan karaa iftiinka, tirakoobka, iyo deegaanka.
- Wanaagga beenta ah waxa laga yaabaa inaan la dareemin ilaa xadka kalsoonida aan la kormeerin.
Tallaabooyinka xiga
- Qeex shuruudaha aqbalida ee saxnaanta, dib u celinta, iyo kharashyada khaladka.
- Ku tijaabi xogta ku habboon xaaladaha wax soo saarka dhabta ah.
- Ku dar dib u eegis bini'aadamka si aad u hesho kalsoonida hoose ama saameeynta sare.
- Lasoco moodeel dhaqaaqa oo dib u cusboonaysii kamarada ama xogta kaydinta ka dib.
Sii wad Sahaminta
Warqad bilaash ah
Hel warbixinta maalinlaha ah ee AI
Saddex sheeko oo la xaqiijiyay oo AI ah maalin kasta oo shaqo ah, oo lagu qoray Ingiriis fudud. Bilaash had iyo jeer, aan xayaysiis lahayn.
Hal iimayl maalin kasta oo shaqo ah. Ka bax hal gujin. Marna ma iibinno ama ma wadaagno ciwaankaaga.
Is tijaabi
Take the Marigold Diffusion Depth Estimation quiz
Fikrad degdeg ah oo ku saabsan jawaab kasta, iyo shahaado la wadaajin karo oo leh aqoonsi la xaqiijin karo markaad ka gudubto koorso.
Taageer waxbarashada AI bilaashka ah. AI Understanding waa 501(c)(3) aan faa'iido doon ahayn — xayaysiis la'aan, albaab lacag ah ma jiro, had iyo jeer. Samee deeq
Su'aalaha soo noqnoqda
What is Marigold Diffusion Depth Estimation?
Marigold waxay dib u soo celisaa qaabka fidinta muuqaalka jiilka hore loo tababaray (Stable Diffusion) si loo saadaaliyo khariidado qoto dheer oo aad u faahfaahsan. Waxa ay ku tusinaysaa in aad u rogi karto aqoonta muuqaalka hodanka ah ee koronto-dhaliye ka dhigi karta qalab wax-aragtiyeed oo sax ah oo leh xog tababar oo yaab leh.
Qaabkee horay loo tababaray ayuu Marigold ku dhisayaa?
Marigold si fiican ayuu u habeeyey qaabka faafinta daahsoon ee Stable Diffusion si uu u soo saaro khariidado qoto dheer.
Sidee buu Marigold u qaabeeyaa hawsha qiyaasitaanka qoto dheer?
Waxay ula dhaqantaa qoto dheer sidii shay la 'dhalin karo' oo ku xidhan sawirka gelinta, dib u adeegsiga mishiinnada faafinta.
Maxaa la yaabay xogta tababarka Marigold?
Marigold si fiican ayaa loogu habeeyay xogta synthetic sida Hypersim iyo Virtual KITTI laakiin waxay koobaysaa eber-shot sawirada dhabta ah.
Waa maxay sababta Marigold caadi ahaan uga gaabiyaa moodooyinka qoto dheer ee horay loo sii wado?
Moodooyinka faafintu waxay diidaan tallaabooyin badan, taasoo ka dhigaysa fikradda ka gaabinaysa hal baas oo hore ah.
Meelkee ayay Marigold ku qabataa habka fidinta?
Sawirka iyo qoto dheerba waxaa lagu dhejiyay booska daahsoon ee VAE halkaasoo U-Net ay diidayso.
Sii wad waxbarashada
Tilmaamaha la xidhiidha
Tilmaamayaal badan ayaa loo doortay mawduucan