Sehemu za Mionzi ya Neural
Sehemu za Neural Radiance (NeRF) huunda upya mandhari kamili ya 3D kutoka kwa picha chache za kawaida, kukuruhusu kupeperusha kamera hadi mitazamo mipya kabisa.
Muhtasari
It reframed 3D capture as training a tiny neural network rather than building a mesh.
Dive ya kina
Ilianzishwa mnamo 2020 na Mildenhall na wenzake, NeRF huhifadhi tukio zima ndani ya mtandao mdogo wa neva (kielelezo cha safu nyingi). Kwa kuzingatia uhakika wa 3D na mwelekeo wa kutazama, mtandao hutoa rangi ya sehemu hiyo na jinsi ilivyo wazi. Ili kutoa pikseli, NeRF huweka miale kwenye eneo, sampuli za pointi kando yake, huuliza mtandao, na kuchanganya matokeo kwa kutumia uonyeshaji wa sauti. Kwa sababu mchakato huu wote unaweza kutofautishwa, mtandao unafunzwa kwa kulinganisha pikseli zinazotolewa na picha halisi za ingizo na kurekebisha hadi zilingane. Mafanikio yake ni uhalisia wa picha, ikiwa ni pamoja na madoido yanayotegemea mwonekano kama vile uakisi na vivutio vyema ambavyo hubadilika unaposonga. Upande mbaya ni kwamba kila tukio linahitaji mafunzo yake mwenyewe, na njia asili ilikuwa polepole kutoa mafunzo na kutoa.
Ufahamu wa Kiufundi
NeRF inawakilisha tukio kama kipengele cha kukokotoa cha 5D: ingiza nafasi (x, y, z) pamoja na mwelekeo wa kutazama (pembe mbili), na MLP hurejesha rangi ya RGB na msongamano wa sauti. Maelezo muhimu ni usimbaji wa nafasi, ambao ramani huratibu kupitia vitendaji vya masafa ya juu vya sine na kosini ili mtandao uweze kunasa maelezo makali badala ya kutoa matokeo ukungu. Utoaji huunganisha rangi na msongamano kando ya kila mwale wa kamera, uzani wa karibu, sampuli zisizo wazi zaidi kwa uzito zaidi, haswa hesabu ya uwasilishaji wa sauti ya asili inayofunzwa.
Athari za kimkakati
Kasi na kiwango
Visual AI inaweza kufanya ukaguzi, ugunduzi na kazi za kuweka lebo kiotomatiki kwa kiwango.
Tengeneza chaguzi
Timu bunifu zinaweza kuiga dhana kwa haraka zaidi na masahihisho machache ya mikono.
Timu na mtiririko wa kazi
Uendeshaji unaweza kutumia ishara za picha na video ambazo hapo awali zilikuwa ngumu kuchakata.
Mustakabali wa Nyanja za Mionzi ya Neural
Utafiti wa NeRF ulilipuka baada ya 2020, na ufuatiliaji kama vile mafunzo ya kukata Papo hapo-NGP kutoka saa hadi sekunde kwa kutumia usimbaji wa gridi ya hashi, na Mip-NeRF kuboresha ubora katika mizani. Uga unazidi kuunganishwa na au kupingwa na Gaussian Splatting, ambayo hutoa kasi zaidi. Tarajia mbinu zinazotokana na NeRF katika uchoraji wa ramani, mwonekano wa bidhaa za e-commerce, madoido ya taswira ya filamu, na Uhalisia Pepe, pamoja na ukuaji wa NeRF zinazobadilika ambazo hushughulikia matukio yanayosonga na kunasa "porini" kwa kubadilisha mwangaza. Mandhari makubwa ni kasi, uwezo wa kuhariri na kunasa matukio kutoka kwa picha chache zaidi.
Utekelezaji wa Ulimwengu Halisi
Kugeuza video ya simu ya kitu kuwa mwonekano wa 3D unaweza kuzunguka kwa ununuzi mtandaoni
Kuunda upya maeneo halisi kama mandhari ya picha halisi ya madoido ya filamu na taswira
Kuunda pazia za 3D za uhalisia pepe na ulioboreshwa
Inahifadhi kidijitali tovuti za urithi wa kitamaduni na vizalia vya programu kutoka kwa seti za picha
Hatari & Walinzi
Haki za picha na idhini zinaweza kuwa hatari za kisheria ikiwa asili haiko wazi.
Utendaji wa muundo unaweza kutofautiana katika mwangaza, idadi ya watu na mazingira.
Chanya za uwongo zinaweza kutotambuliwa isipokuwa viwango vya uaminifu vifuatiliwe.
Ramani ya Utekelezaji
Bainisha vigezo vya kukubalika vya usahihi, kumbukumbu na gharama za makosa.
Jaribu kwa kutumia data inayolingana na hali halisi ya uzalishaji.
Ongeza ukaguzi wa kibinadamu kwa utabiri wa chini au utabiri wa athari kubwa.
Fuatilia mtindo wa kuteleza na uthibitishe upya baada ya mabadiliko ya kamera au mkusanyiko wa data.
Endelea Kuchunguza
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Neural Radiance Fields quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Mwongozo unaofuata
Mip-NeRF na Sehemu za Mionzi ya Kuzuia Iliyotengwa
Maswali yanayoulizwa mara kwa mara
What is Neural Radiance Fields?
Sehemu za Neural Radiance (NeRF) huunda upya mandhari kamili ya 3D kutoka kwa picha chache za kawaida, kukuruhusu kupeperusha kamera hadi mitazamo mipya kabisa. Ilibadilisha picha ya 3D kama mafunzo kwa mtandao mdogo wa neva badala ya kuunda matundu.
Je, lengo kuu la Uga wa Neural Radiance ni lipi?
NeRF huunda uwakilishi wa 3D kutoka kwa seti ya picha, kuwezesha uwasilishaji wa picha halisi kutoka kwa maoni ambayo sio kwenye picha asili.
Je, pato la mtandao wa neural wa NeRF kwa pembejeo fulani?
Kwa nafasi ya 3D na mwelekeo wa kutazama, MLP inarudisha rangi na msongamano (opacity) katika hatua hiyo.
Je, ni pembejeo gani za utendaji kazi wa 5D wa NeRF?
NeRF inachukua eneo la 3D (x, y, z) na mwelekeo wa kutazama (pembe mbili), jumla ya pembejeo tano.
Je, NeRF inageuzaje matokeo ya mtandao wake kuwa rangi ya saizi ya mwisho?
Sampuli za NeRF huelekeza kando ya kila mwale na kuunganisha rangi yao iliyopimwa kwa uzito, mlingano wa utoaji wa ujazo wa kawaida unaofanywa kutofautishwa.
Kwa nini NeRF hutumia usimbuaji wa nafasi kwenye kuratibu za ingizo?
Kuratibu kwa ramani kupitia vitendaji vya juu-frequency sine/cosine huruhusu MLP kuwakilisha maelezo mafupi badala ya matokeo yenye ukungu.