Qiyaasta Qoto dheer ee Faafinta Marigold
Marigold waxay dib u soo celisaa qaabka fidinta muuqaalka jiilka hore loo tababaray (Stable Diffusion) si loo saadaaliyo khariidado qoto dheer oo aad u faahfaahsan.
Dulmar
It shows you can turn a generator's rich visual knowledge into a precise perception tool with surprisingly little training data.
quusid qoto dheer
Marigold (ETH Zurich, CVPR 2024 ugu Wanaagsan Warqadda Sharafta leh) waxay dib u habaynaysaa qiyaasta qoto dheer sidii mushkilad jiileed shuruudaysan. Halkii laga tababari lahaa shabakad qoto dheer oo xoqan, waxay si fiican u habaynaysaa Stable Diffusion si ay 'u dhaliso' khariidad qoto dheer oo shardi ku ah sawirka gelinta. Aragtida ayaa ah in qaabka loo tabobaray soo saarista sawirada sawir-qaadista uu horay u bartay joomatari muuqaalka, nalka, iyo qaab-dhismeedka qoto dheer ee meesheeda qarsoon, sida saxda ah ee hore waxtar u leh qoto dheer. Waxa cajiib ah, Marigold si fiican ayaa loogu habeeyay kaydka xogta synthetic oo kaliya (sida Hypersim iyo Virtual KITTI) wali si fiican ayey u soo koobtay sawirada dhabta ah eber-shot. Waxay soo saartaa qoto dheer oo qaraabo ah oo aan kala sooc lahayn oo leh tafaasiil aad u fiican, in kasta oo diidmada soo noqnoqota ay ka dhigayso mid ka gaabis ah moodooyinka horay u sii quudinta sida DepthAnything.
Aragtida Farsamada
Marigold waxay ka shaqeysaa Stable Diffusion's space qarsoon. Sawirka iyo khariidadda qoto dheer labadaba waxa lagu calaamadeeyay isla VAE; U-Net waa si fiican loo habeeyey si loo diido qoto dheer oo qarsoon oo shardi ku ah sawirka nadiifka ah ee qarsoon. Marka la eego waxa ay socodsiisaa wareegtada beeninta caadiga ah, ka dibna waxay dejisaa sirta qarsoon. Sababtoo ah muunado, orod badan ayaa la isugu geyn karaa xasiloonida, xisaabinta ganacsiga si sax ah. Ka dib 'LCM' iyo hal-tallaabo noocyo kala duwan ayaa jaray daraasiin tillaabo ilaa hal baas.
Saamaynta Istiraatijiyadeed
Xawaaraha iyo miisaanka
Visual AI wuxuu si otomaatig ah u samayn karaa baadhista, ogaanshaha, iyo sumadaynta hawlaha miisaanka.
Xulashada dhismayaasha
Kooxaha hal-abuurka leh waxay hindise karaan fikradaha si dhakhso leh iyagoo leh dib-u-eegis buugeed yar.
Kooxda iyo socodka shaqada
Hawlgalladu waxay isticmaali karaan calaamadaha muuqaalka iyo muuqaalka kuwaas oo markii hore adkeyd in la farsameeyo.
Mustaqbalka Qiyaasta Qoto dheer ee Faafinta Marigol
Cunto karinta Marigold, hagaajinta fidinta fidinta hore ee saadaasha cufan, waa mid guud ka baxsan qoto dheer ilaa heerka caadiga ah ee dusha sare, qudhunka muuqaalka gudaha, iyo qiyaasta alaabta. Kala duwanaanshaha moodeelka dhaqsaha badan iyo joogteynta ayaa xiraya farqiga xawaaraha ee shabakadaha gudbinta quudinta, taasoo ka dhigaysa fidinta ku saleysan fidinta aaladaha isdhexgalka. Filo isbeddel ballaadhan oo hal laf dhabarta wax-soo-saarka ee horay loo tababbaray lagu habeeyey joomatari iyo hawlo aragtiyeed badan, yaraynta baahida hawlo-gaar ah oo calaamadaysan.
Dhaqangelinta Adduunka-dhabta ah
Ka soo saarida qoto-dheer ee qoto dheer ee sawirada qaab dhismeedka iyo alaabada ee iftiiminta iyo majaajilada 3D.
Abuurista khariidado qoto dheer oo tafatiran oo loo isticmaalo qaboojinta sawirka la xakameyn karo iyo jiilka fiidyaha.
Aflaanta caawinta iyo kooxaha VFX ee ku jira matte iyo parallax waxay ka shaqeeyaan meelaha saxda ah ee muhiimka ah.
U adeega sida gundhig cilmi baadhiseed oo tusinaysa sida loo waafajiyo wax-soo-saarka kahor hawlaha saadaasha cufan.
Khatarta & Dariiqyada Ilaalada
Xuquuqda sawirka iyo ogolaanshaha waxay noqon kartaa khataro sharci ah haddii caddayntu aanay caddayn.
Waxqabadka moodeelku wuu ku kala duwanaan karaa iftiinka, tirakoobka, iyo deegaanka.
Wanaagga beenta ah waxa laga yaabaa inaan la dareemin ilaa xadka kalsoonida aan la kormeerin.
Qorshe Hawleedka Dhaqangelinta
Qeex shuruudaha aqbalida ee saxnaanta, dib u celinta, iyo kharashyada khaladka.
Ku tijaabi xogta ku habboon xaaladaha wax soo saarka dhabta ah.
Ku dar dib u eegis bini'aadamka si aad u hesho kalsoonida hoose ama saameeynta sare.
Lasoco moodeel dhaqaaqa oo dib u cusboonaysii kamarada ama xogta kaydinta ka dib.
Sii wad Sahaminta
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Marigold Diffusion Depth Estimation quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Hagaha xiga
Qiyaasta Qoto dheer ee Monocular
Su'aalaha soo noqnoqda
What is Marigold Diffusion Depth Estimation?
Marigold waxay dib u soo celisaa qaabka fidinta muuqaalka jiilka hore loo tababaray (Stable Diffusion) si loo saadaaliyo khariidado qoto dheer oo aad u faahfaahsan. Waxa ay ku tusinaysaa in aad u rogi karto aqoonta muuqaalka hodanka ah ee koronto-dhaliye ka dhigi karta qalab wax-aragtiyeed oo sax ah oo leh xog tababar oo yaab leh.
Qaabkee horay loo tababaray ayuu Marigold ku dhisayaa?
Marigold si fiican ayuu u habeeyey qaabka faafinta daahsoon ee Stable Diffusion si uu u soo saaro khariidado qoto dheer.
Sidee buu Marigold u qaabeeyaa hawsha qiyaasitaanka qoto dheer?
Waxay ula dhaqantaa qoto dheer sidii shay la 'dhalin karo' oo ku xidhan sawirka gelinta, dib u adeegsiga mishiinnada faafinta.
Maxaa la yaabay xogta tababarka Marigold?
Marigold si fiican ayaa loogu habeeyay xogta synthetic sida Hypersim iyo Virtual KITTI laakiin waxay koobaysaa eber-shot sawirada dhabta ah.
Waa maxay sababta Marigold caadi ahaan uga gaabiyaa moodooyinka qoto dheer ee horay loo sii wado?
Moodooyinka faafintu waxay diidaan tallaabooyin badan, taasoo ka dhigaysa fikradda ka gaabinaysa hal baas oo hore ah.
Meelkee ayay Marigold ku qabataa habka fidinta?
Sawirka iyo qoto dheerba waxaa lagu dhejiyay booska daahsoon ee VAE halkaasoo U-Net ay diidayso.