Nchịkọta
Zero-1-to-3 na-atụgharị otu foto nke ihe ka ọ bụrụ onyonyo nke otu ihe ahụ a na-ahụ site na akụkụ ọhụrụ ọ bụla, na-eji ụdị mgbasa ozi etinyere na ntụgharị igwefoto ị rịọrọ. Ọ dị mkpa n'ihi na ọ na-ahapụ gị ka ị rụgharịa nlele 3D na-agbanwe agbanwe na-enweghị nyocha ihe ahụ site n'ọtụtụ akụkụ.
Ọhụụ Zero-1-to-3 Novel View Diffusion bụ nke na-arụ ọrụ n'ọhụụ kọmputa nke na-akọwa ma ọ bụ mepụta mgbasa ozi anya maka nyocha, arụmọrụ, na imepụta ihe.
Ime miri emi
Zero-1-to-3 (nke sitere na Columbia, 2023) na-ada ụda Stable Diffusion nke ọma ka ọ nwee ike ịrụ nlegharị anya ọhụụ efu site na otu onyonyo ntinye. Ị na-enye ya otu foto gbakwunyere mgbanwe igwefoto ikwu (ntụgharị na obere ntụgharị), ihe nlereanya ahụ na-ewepụta ihe ihe ahụ ga-adị ka n'echiche ọhụrụ ahụ. Echiche bụ isi bụ na nnukwu ụdị mgbasa ozi 2D, zụrụ azụ na nnukwu mkpokọta onyonyo weebụ, etinyela uche n'ihe gbasara geometric na anụ ahụ n'ụzọ zuru ezu banyere otu ihe si dị na 3D. Site n'imezigharị nke ọma na ihe ndekọ ihe sịntetik nke ihe arụpụtara site n'ọtụtụ akụkụ igwefoto a na-achịkwa (na-eji Objaverse), ihe nlereanya ahụ na-amụta ịse eserese ndị bu ụzọ na njikwa igwefoto doro anya. Echiche ndị a na-emepụta nwere ike na-enye nri nwughari 3D ala.
Nghọta nka nka
Ọnọdụ ihe atụ dị na onyonyo isi mmalite ụzọ abụọ: ntinye CLIP na-ejikọta ya na igwefoto ikwu (azimuth, elu, radius) iji duzie nlebara anya n'ofe, ebe ihe onyonyo a na-edoghị anya bụ ọwa-gbakọnyere na latent mkpọtụ ka echekwara nkọwa zuru oke na njirimara. Ọzụzụ na-eji mbiet-pose-oyiyi triplet emepụtara site na ihe CAD, yabụ netwọk na-amụta maapụ a na-achịkwa n'etiti mgbanwe echiche na mgbanwe pikselụ na-esi na ya pụta.
Ịmalite mgbasa ozi efu-1-to-3 novel
Zero-1-to-3 na-atụgharị otu foto nke ihe ka ọ bụrụ onyonyo nke otu ihe ahụ a na-ahụ site na akụkụ ọhụrụ ọ bụla, na-eji ụdị mgbasa ozi etinyere na ntụgharị igwefoto ị rịọrọ. Ọ dị mkpa n'ihi na ọ na-ahapụ gị ka ị rụgharịa nlele 3D na-agbanwe agbanwe na-enweghị nyocha ihe ahụ site n'ọtụtụ akụkụ. Ọhụụ Zero-1-to-3 Novel View Diffusion bụ nke na-arụ ọrụ n'ọhụụ kọmputa nke na-akọwa ma ọ bụ mepụta mgbasa ozi anya maka nyocha, arụmọrụ, na imepụta ihe. Iji wulite nghọta miri emi, na-emeso mgbasagharị Zero-1-to-3 Novel View Diffusion dị ka ihe nrụ ọrụ, ọ bụghị otu njirimara: kọwapụta nsonaazụ achọrọ, dokwuo anya echiche, wee kewaa ihe sistemụ nwere ike ime nke ọma na ihe ka na-achọ mkpebi ndị ọkachamara.
Na omume, otu siri ike na-eji Zero-1-to-3 Novel View Diffusion itule ziri ezi na eziokwu arụ ọrụ dị ka ogo data, iche iche ọkụ, na ịkpọ aha. Ha na-edepụta njirisi ịga nke ọma nke ọma, nwalee megide data ziri ezi yana usoro ọrụ, yana na-atụgharị dabere na usoro ọdịda ahụrụ karịa karịa mmeri otu oge. Nke a bụ ebe nghọta usoro ihe atụ na-atụgharị ka ọ bụrụ ike na-adịgide adịgide gafee ngwaahịa, amụma na arụmọrụ.
Visual AI nwere ike megharịa nyocha, nchọpụta na mkpado ọrụ n'ọtụtụ. N'otu oge ahụ, ikike onyonyo na nkwenye nwere ike bụrụ ihe egwu iwu ma ọ bụrụ na edoghị anya. Ụzọ kachasị na-agbanwe agbanwe bụ ijikọ ọsọ nnwale na ịdọ aka ná ntị ọchịchị: ndị na-anya ụgbọ elu, ijide ihe akaebe, bipụta ndekọ mkpebi, na na-aga n'ihu na-emelite nchekwa dị ka omume nlereanya, atụmanya ndị ọrụ, na ihe iwu chọrọ.
Mmetụta Strategic
Visual AI nwere ike megharịa nyocha, nchọpụta na mkpado ọrụ n'ọtụtụ.
Visual AI nwere ike megharịa nyocha, nchọpụta na mkpado ọrụ n'ọtụtụ. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Otu ndị na-emepụta ihe nwere ike imepụta echiche ngwa ngwa site na ngbanwe akwụkwọ ntuziaka ole na ole.
Otu ndị na-emepụta ihe nwere ike imepụta echiche ngwa ngwa site na ngbanwe akwụkwọ ntuziaka ole na ole. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Ọrụ nwere ike iji onyonyo na akara vidiyo siri ike ịhazi.
Ọrụ nwere ike iji onyonyo na akara vidiyo siri ike ịhazi. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Mmejuputa n'ezie n'ụwa
Ịmepụta echiche ntụgharị nke otu foto ngwaahịa ka ndepụta e-azụmahịa nwere ike igosi ihe ahụ n'akụkụ niile
Na-ebulite ntupu 3D ederede nke ihe site na otu foto ekwentị nkịtị maka nlebanya AR
Ịmepụta nka nrụtụ aka ọtụtụ akụkụ na-agbanwe agbanwe nke agwa ma ọ bụ nkwado maka egwuregwu na ndị na-ese ihe nkiri
Na-enye echiche ọhụrụ emepụtara n'ime NeRF ma ọ bụ Gaussian Splatting nwughari iji mejupụta geometry a na-adịghị ahụ anya.
Usoro mmejuputa
Nleba anya nke efu-1 ruo-3 na omume
Ịmepụta echiche ntụgharị nke otu foto ngwaahịa ka ndepụta e-azụmahịa nwere ike igosi ihe ahụ n'akụkụ niile.
Ịmepụta echiche ntụgharị nke otu foto ngwaahịa ka ndepụta e-azụmahịa nwere ike igosi ihe ahụ sitere n'akụkụ niile Otu dị iche iche na-enwetakarị nsonaazụ ka mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-edebe ụzọ ịrị elu mmadụ maka ikpe ikpe, ma soro ma uru arụpụtaghị ihe na ụgwọ njehie na oge.
Nleba anya nke efu-1 ruo-3 na omume
Na-ebulite ntupu 3D ederede nke ihe site na otu foto ekwentị nkịtị maka nlebanya AR.
Idobe ntupu 3D ederede nke ihe site na foto ekwentị nkịtị maka nlele AR Otu dị iche iche na-enwetakarị nsonaazụ kacha mma mgbe ha kọwapụtara ọnụ ụzọ dị mma n'ihu, debe ụzọ mmụba mmadụ maka ikpe ọnụ, wee soro ma uru nrụpụta yana ụgwọ njehie ka oge na-aga.
Nleba anya nke efu-1 ruo-3 na omume
Ịmepụta nka nrụtụ aka ọtụtụ akụkụ na-agbanwe agbanwe nke agwa ma ọ bụ nkwado maka egwuregwu na ndị na-ese ihe nkiri.
Ịmepụta nka nka n'ọtụtụ akụkụ na-agbanwe agbanwe nke agwa ma ọ bụ nkwado maka egwuregwu na ndị na-ese ihe nkiri Otu dị iche iche na-enweta nsonaazụ kacha mma mgbe ha kọwapụta ọnụ ụzọ dị mma n'ihu, na-edobe ụzọ ịrị elu mmadụ maka ikpe ihu, ma soro ma uru nrụpụta na ụgwọ njehie n'ime oge.
Nleba anya nke efu-1 ruo-3 na omume
Na-enye echiche ọhụụ ọhụrụ ahazigharị n'ime NeRF ma ọ bụ Gaussian Splating nwughari iji mejupụta geometry anaghị ahụ anya.
Inye ihe ngosi ọhụụ agbakwunyere n'ime NeRF ma ọ bụ Gaussian Splatting nwughari iji mejupụta geometry a na-adịghị ahụ anya Otu egwuregwu na-enwetakarị nsonaazụ kacha mma mgbe ha kọwapụtara ọnụ ụzọ dị mma n'ihu, debe ụzọ mmụba mmadụ maka ikpe ọnụ, wee soro ma uru nrụpụta yana ụgwọ njehie n'ime oge.
Ihe ize ndụ & okporo ụzọ nche
Ikike onyonyo na nkwenye nwere ike bụrụ ihe egwu dị n'iwu ma ọ bụrụ na edoghị anya.
Ọrụ nlereanya nwere ike ịdịgasị iche n'ofe ọkụ, igwe mmadụ, na gburugburu.
Enwere ike ghara ịhụ ihe dị mma ma ọ bụrụ na enyochaghị oke ntụkwasị obi.
Map mmejuputa
Kọwaa ụkpụrụ nnabata maka nkenke, icheta, na ụgwọ njehie.
Kọwaa ụkpụrụ nnabata maka nkenke, icheta, na ụgwọ njehie. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Nwalee na data dabara na ọnọdụ mmepụta n'ezie.
Nwalee na data dabara na ọnọdụ mmepụta n'ezie. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Tinye nyocha mmadụ maka obere obi ike ma ọ bụ amụma mmetụta dị elu.
Tinye nyocha mmadụ maka obere obi ike ma ọ bụ amụma mmetụta dị elu. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Sochie ihe nlere anya wee megharịa ka emechara mgbanwe igwefoto ma ọ bụ dataset.
Sochie ihe nlere anya wee megharịa ka emechara mgbanwe igwefoto ma ọ bụ dataset. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.