Visual AI GUIDE

DreamFusion iyo Saamaynta Distillation Dhibcaha

DreamFusion waxay ka soo saartaa walxaha 3D qoraalka iyadoo la adeegsanayo qaabka faafinta sawirka 2D dhaleeceyn ahaan, waligiisna uma tababarin xogta 3D kasta.

Dulmar

DreamFusion waxay ka soo saartaa walxaha 3D qoraalka iyadoo la adeegsanayo qaabka faafinta sawirka 2D dhaleeceyn ahaan, waligiisna uma tababarin xogta 3D kasta. Hal-abuurkeeda udub-dhexaadka ah, Dhibcaha Distillation Sampling, ayaa noqday habka aasaasiga ah ee qoraalka-u-3D oo dhan.

DreamFusion iyo Dhibcaha Distillation Sampling waxaa iska leh socodka shaqada-aragga kombuyuutarka ee tarjuma ama abuura warbaahinta muuqaalka falanqaynta, hawlgallada, iyo hal-abuurka.

quusitaanka qoto dheer

DreamFusion, laga bilaabo Google sanadka 2022, ayaa la waydiiyay: 2D qaab qoraal-u-sawir ma bari karaa muuqaalka 3D inuu u ekaado midig xagal kasta? Waxay wanaajisaa NeRF (Neural Radiance Field) si soo-bandhigidda kaamirooyinka random-ka ah, marka la buuqo oo la tuso qaabka fidinta la qaboojiyey (Imagen), waxay u dhigantaa sawirro macquul ah isla markiiba qoraalka. Muhiimad ahaan ma isticmaasho xogta tababarka 3D. Horumarku waa Dhibcaha Distillation Sampling (SDS): Halkii dib loogu faafin lahaa moodeelka faafinta qaaliga ah ee U-Net, SDS waxay isticmaashaa dhawaaqa la saadaaliyay ee moodeelka si toos ah pixels-yada la sameeyay. Ku celcelinta tan kumanaan aragtiyo ayaa sawiraysa hanti 3D ah oo isku xidhan, oo dhammaystiran oo leh joomatari iyo muuqaalka ku-tiirsanaanta, laga bilaabo hal jumlad.

Aragtida Farsamada

SDS waxay ula dhaqantaa qaabka faafinta sidii shaqo dhibco la qaboojiyey. Waxay soo saartaa NeRF, waxay kordhisaa buuqa, waxay waydiisaa U-Net faafinta si ay u saadaaliso buuqaas, waxayna u xisaabisaa jaantuska sida (sanqadha la saadaaliyay ee laga jaray buuqa lagu daray) dib loogu riixay sawirka la sameeyay oo sidaas darteed miisaanka NeRF. Ka boodista U-Net Jacobian waxay ka dhigtaa mid la heli karo. Hagitaan-free-classifier sare (qiyaastii 100) ayaa loo baahan yahay si loo helo natiijooyin fiiqan, taas oo sababta sifada aad u buuxsantay, mararka qaarkoodna wareersan 'DreamFusion look'.

Barashada DreamFusion iyo Saamaynta Distillation Dhibcaha

DreamFusion waxay ka soo saartaa walxaha 3D qoraalka iyadoo la adeegsanayo qaabka faafinta sawirka 2D dhaleeceyn ahaan, waligiisna uma tababarin xogta 3D kasta. Hal-abuurkeeda udub-dhexaadka ah, Dhibcaha Distillation Sampling, ayaa noqday habka aasaasiga ah ee qoraalka-u-3D oo dhan. DreamFusion iyo Dhibcaha Distillation Sampling waxaa iska leh socodka shaqada-aragga kombuyuutarka ee tarjuma ama abuura warbaahinta muuqaalka falanqaynta, hawlgallada, iyo hal-abuurka. Si loo dhiso faham qoto dheer, ula dhaqan DreamFusion iyo Dhibcaha Distillation Sampling sidii qaab hawleed, ma aha hal sifo: qeex natiijooyinka la rabo, cadee fikradaha, oo kala saar waxa nidaamku si kalsooni leh u qaban karo iyo waxa weli u baahan xukun khabiir.

Ficil ahaan, kooxaha xoogga leh ee isticmaalaya DreamFusion iyo Dhibcaha Distillation Sampling saxnaanta dheelitirnaanta iyo xaqiiqooyinka hawlgelinta sida tayada xogta, kala duwanaanta iftiinka, iyo calaamadaynta joogtaynta. Waxay diiwaangeliyaan shuruudaha guusha ee cad, tijaabiyaan xogta dhabta ah iyo qulqulka shaqada, waxayna ku celceliyaan ku saleysan qaababka guul darrida ee la arkay halkii ay hal mar ku guuleysan lahaayeen halbeegyada. Tani waa halka fahamka aragtida uu isu beddelo karti waara oo dhan badeecada, siyaasadda, iyo hawlgallada.

Visual AI wuxuu si otomaatig ah u samayn karaa baadhista, ogaanshaha, iyo sumadaynta hawlaha miisaanka. Isla mar ahaantaana, xuquuqda sawirku iyo ogolaanshaha waxay noqon karaan khataro sharci ah haddii caddayntu aanay caddayn. Habka ugu adkeysi badan waa in la isku daro xawaaraha tijaabada iyo anshaxa maamulka: socodsiinta duuliyayaasha, qabashada caddaynta, daabacaadda go'aanka, iyo si joogto ah u cusboonaysii ilaalinta sida habdhaqanka moodeelka, filashada isticmaale, iyo shuruudaha sharciyaynta.

Saamaynta Istiraatijiyadeed

Visual AI wuxuu si otomaatig ah u samayn karaa baadhista, ogaanshaha, iyo sumadaynta hawlaha miisaanka.

Visual AI wuxuu si otomaatig ah u samayn karaa baadhista, ogaanshaha, iyo sumadaynta hawlaha miisaanka. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Kooxaha hal-abuurka leh waxay hindise karaan fikradaha si dhakhso leh iyagoo leh dib-u-eegis buugeed yar.

Kooxaha hal-abuurka leh waxay hindise karaan fikradaha si dhakhso leh iyagoo leh dib-u-eegis buugeed yar. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Hawlgalladu waxay isticmaali karaan calaamadaha muuqaalka iyo muuqaalka kuwaas oo markii hore adkeyd in la farsameeyo.

Hawlgalladu waxay isticmaali karaan calaamadaha muuqaalka iyo muuqaalka kuwaas oo markii hore adkeyd in la farsameeyo. Hawlgelinta tayada sare leh, tan waxaa loo tarjumaa shuruuc hawleed la cabbiri karo, xuduudaha lahaanshaha, iyo caadooyinka dib u eegista soo noqnoqda si kooxuhu ay u cabbiraan kalsoonida halkii ay ka saari lahaayeen madmadowga.

Mustaqbalka DreamFusion iyo Saamaynta Distillation Dhibcaha

SDS waxa ay dhalisey khad qani ah oo shaqo ah oo hagaajinaysa daciifnimadeeda: Magic3D ee xallinta iyo xawaaraha, Dhibcaha Kala Duwan ee ProlificDreamer ee fiiqan, wax soo saar badan oo kala duwan, iyo habab lagu weerarayo farshaxanada wejiyada badan ee 'Janus'. Goobtu waxay si isa soo taraysa u lamaanaynaysaa SDS oo leh aragtiyo kala duwan oo hore iyo muuqaalo 3D degdeg ah sida Gaussian Splatting. Filo qoraalka-to-3D inuu u koraan si dhakhso leh oo joomatari ahaan aamin ah, adoo ku soo koobaya farqiga hantida gacanta lagu qaabeeyey.

Dhaqangelinta Adduunka-dhabta ah

Soo saarista nooc 3D ah 'sawirka DSLR ee Dabagaale xidhan koofiyad yar' qoraalka oo keliya

Abuuritaanka ciyaarta qabyada ah iyo hantida AR iyadoon gacanta lagu sawirin 3D

Soo saarista meshes dhoofin kara oo fannaaniintu sifeeyaan halkii ay ka dhisi lahaayeen meel eber ah

Saldhigyada cilmi-baarista ee qiimaynta hababka cusub ee qoraalka-3D ee ka dhanka ah SDS

Hababka Dhaqangelinta

DreamFusion iyo Dhibcaha Distillation Sampling ee ficil ahaan

Soo saarista qaabka 3D ee 'sawirka DSLR ee Dabagaale xidhan koofiyad yar' qoraalka oo keliya.

Soo saarista qaabka 3D ee 'sawirka DSLR ee Dabagaalle xidhan koofiyad yar' ee qoraalka keligiis Kooxuhu waxay inta badan helaan natiijooyin ka wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, waxayna la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada qaladka waqti ka dib.

DreamFusion iyo Dhibcaha Distillation Sampling ee ficil ahaan

Abuuritaanka ciyaarta qabyada ah iyo hantida AR iyadoon gacanta lagu sawirin 3D.

Abuuritaanka ciyaaraha qabyada ah iyo hantida AR iyada oo aan lahayn buug-gacmeedka 3D kooxuhu waxay badanaa helaan natiijooyin wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, oo ay la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada khaladka ah waqti ka dib.

DreamFusion iyo Dhibcaha Distillation Sampling ee ficil ahaan

Soo saarista meshes dhoofin kara oo fannaaniintu sifeeyaan halkii ay ka dhisi lahaayeen meel eber ah.

Soo saarista meshes la dhoofin karo oo farshaxannadu sifeeyaan halkii ay ka dhisi lahaayeen xoq kooxuhu caadi ahaan waxay helayaan natiijooyin ka wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, oo ay la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada qaladka waqti ka dib.

DreamFusion iyo Dhibcaha Distillation Sampling ee ficil ahaan

Saldhigyada cilmi-baarista ee qiimaynta hababka cusub ee qoraalka-3D ee ka dhanka ah SDS.

Saldhigyada cilmi-baarista ee lagu qiimeeyo hababka cusub ee qoraalka-3D ee ka dhanka ah Kooxaha SDS waxay caadi ahaan helaan natiijooyin wanaagsan marka ay qeexaan heerarka tayada ee hore, u hayaan dariiqa kor u qaadida bini'aadamka ee kiisaska cirifka ah, oo ay la socdaan labadaba faa'iidooyinka wax soo saarka iyo kharashyada khaladka waqti ka dib.

Khatarta & Dariiqyada Ilaalada

!

Xuquuqda sawirka iyo ogolaanshaha waxay noqon kartaa khataro sharci ah haddii caddayntu aanay caddayn.

!

Waxqabadka moodeelku wuu ku kala duwanaan karaa iftiinka, tirakoobka, iyo deegaanka.

!

Wanaagga beenta ah waxa laga yaabaa inaan la dareemin ilaa xadka kalsoonida aan la kormeerin.

Dhaqangelinta Roadmapka

1

Qeex shuruudaha aqbalida ee saxnaanta, dib u celinta, iyo kharashyada khaladka.

Qeex shuruudaha aqbalida ee saxnaanta, dib u celinta, iyo kharashyada khaladka. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

2

Ku tijaabi xogta ku habboon xaaladaha wax soo saarka dhabta ah.

Ku tijaabi xogta ku habboon xaaladaha wax soo saarka dhabta ah. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

3

Ku dar dib u eegis bini'aadamka si aad u hesho kalsoonida hoose ama saameeynta sare.

Ku dar dib u eegis bini'aadamka si aad u hesho kalsoonida hoose ama saameeynta sare. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

4

Lasoco moodeel dhaqaaqa oo dib u cusboonaysii kamarada ama xogta kaydinta ka dib.

Lasoco moodeel dhaqaaqa oo dib u cusboonaysii kamarada ama xogta kaydinta ka dib. Tallaabo kasta ula dhaqan sida albaabka caddaynta: haddii shuruudaha la buuxin waayo, hakad soo bixidda, xidh farqiga, ka dibna balaadhi isticmaalka.

Sii wad Sahaminta