Visual AI Itọsọna
Lẹsẹkẹsẹ-NGP Hash fifi koodu
Lẹsẹkẹsẹ-NGP jẹ imọ-ẹrọ NVIDIA ti o ṣe ikẹkọ Awọn aaye Radiance Neural ati awọn apilẹṣẹ awọn eya aworan miiran ni iṣẹju-aaya dipo awọn wakati nipa titoju awọn ẹya ti o kọ ẹkọ ni tabili hash multiresolution.
Gbọ si itọsọna yiiAI-ṣe afihan · ~2 min
Lori iwe yi2 min ka
Akopọ
O ṣe pataki nitori pe o jẹ ki oju iṣẹlẹ 3D didara ga ni iyara to lati ni rilara ibaraenisọrọ.
Jin Dive
Lẹsẹkẹsẹ Neural Graphics Primitives (NVIDIA, 2022) kọlu igo akọkọ ti NeRFs: MLP nla ti o gbọdọ beere awọn miliọnu awọn akoko. Dipo fifi koodu si ipo 3D kan pẹlu awọn ẹya sinusoidal ti o wa titi ati gbigbekele nẹtiwọọki nla kan, Lẹsẹkẹsẹ-NGP nlo fifi koodu elile multiresolution kan. Aaye ti wa ni bo nipasẹ awọn akoj pupọ ni awọn ipinnu oriṣiriṣi; maapu sẹẹli akoj kọọkan, nipasẹ iṣẹ hash aye, sinu tabili iwapọ ti awọn ẹya ara ẹrọ ti o kọ ẹkọ. Lati ṣe koodu koodu kan, eto naa n wo oke ati trilinearly interpolate awọn ẹya ara ẹrọ lati ipele ipinnu kọọkan, ṣajọpọ wọn, ati ifunni iyẹn sinu MLP kekere kan. Nitoripe pupọ julọ aṣoju ti o kọ ẹkọ n gbe ni awọn tabili wiwa ati pe nẹtiwọọki kekere kan wa, ikẹkọ ati jigbe di awọn aṣẹ ti titobi ni iyara, nigbagbogbo titan awọn wakati sinu iṣẹju-aaya.
Real-World imuse
Yiyaworan ohun gidi tabi yara sinu NeRF ni iṣẹju-aaya lati ṣeto awọn fọto foonu kan
Ni ibamu iṣẹ ijinna fowo si nkan ti ara fun aṣoju apẹrẹ 3D iyara
Fisinuirindigbindigbin ati aṣoju aworan gigapixel kan bi aaye nkankikan ti nlọsiwaju
Agbara atunkọ ipele iyara ni inu awọn ohun elo irinṣẹ iwadii ati iṣaju VFX
Ojo iwaju ti Iyipada Hash Lẹsẹkẹsẹ-NGP
Iyipada koodu Hash-grid ti di bulọọki ile aiyipada daradara ti o kọja demo NeRF atilẹba, ti a lo ninu iṣakojọpọ wiwo akoko gidi, SDF ati gigapixel-image fitting, simulation, ati bi ẹhin ti awọn ohun elo irinṣẹ bii Nerfstudio. Lakoko ti Gaussian Splatting ni bayi ti njijadu lori iyara Rendering aise, awọn koodu elile wa ni aarin nibiti o ti nilo iwapọ, dan, awọn aaye nkankikan ti o nilo, ati iṣẹ ti nlọ lọwọ darapọ awọn mejeeji ati titari si ọna nla, agbara, ati awọn iwoye ṣiṣan.
Fifi o sinu iwa
Kini idi ti o ṣe pataki
- Iyara ati iwọn. Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.
- Kọ awọn yiyan. Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.
- Ẹgbẹ ati ṣiṣan iṣẹ. Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.
Ṣọra fun
- Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.
- Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.
- Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.
Next awọn igbesẹ
- Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.
- Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.
- Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.
- Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.
Tesiwaju Ṣiṣawari
Ìwé ìròyìn ọfẹ
Gba ìkànìyàn AI ojoojúmọ́
Ìtàn AI mẹta tó jẹ́rìí ní gbogbo owurọ́ ọjọ́ iṣẹ́, kọ́wé ní Gẹ̀ẹ́sì tó rọrùn. Ọfẹ́ fún gbogbo àkókò, kò sí ìpolówó.
Ìmeèlì kan ní gbogbo ọjọ́ iṣẹ́. Yọkúrò ní ìkànìyàn ní ìkànìyàn kan. A kò ta tàbí pín àdírẹ́sì rẹ.
Ṣe idanwo fun ara rẹ
Take the Instant-NGP Hash Encoding quiz
Ìdáhùn lẹ́sẹ̀kẹsẹ̀ lórí gbogbo ìdáhùn, àti iwe-ẹ̀rí tó lè pin pẹ̀lú ID tó lè jẹ́rìí lẹ́yìn tí o bá kọ́ ẹ̀kọ́.
Ṣe àtìlẹ́yìn ẹ̀kọ́ AI ọfẹ́. AI Understanding jẹ́ àjọ àìní èrè 501(c)(3) — kò sí ìpolówó, kò sí àkúnya owó, ní gbogbo àkókò. Ṣe ẹbun kan
Awọn ibeere ti a beere nigbagbogbo
Kini Iyipada Hash Lẹsẹkẹsẹ-NGP?
Lẹsẹkẹsẹ-NGP jẹ imọ-ẹrọ NVIDIA ti o ṣe ikẹkọ Awọn aaye Radiance Neural ati awọn apilẹṣẹ awọn eya aworan miiran ni iṣẹju-aaya dipo awọn wakati nipa titoju awọn ẹya ti o kọ ẹkọ ni tabili hash multiresolution. O ṣe pataki nitori pe o jẹ ki oju iṣẹlẹ 3D didara ga ni iyara to lati ni rilara ibaraenisọrọ.
Kini igo akọkọ ni awọn NeRFs Ayebaye ti o fojusi Lẹsẹkẹsẹ-NGP?
Awọn NeRF Ayebaye gbarale MLP nla kan ti a beere lọpọlọpọ nigbagbogbo; Lẹsẹkẹsẹ-NGP n dinku ti o ṣiṣẹ lati yara ikẹkọ ati ṣiṣe.
Nibo ni Lẹsẹkẹsẹ-NGP ti fipamọ pupọ julọ awọn aye ti o le kọ ẹkọ?
Awọn ẹya ti o kọ ẹkọ n gbe ni awọn tabili hash multiresolution, nlọ MLP kekere kan nikan lati ṣajọpọ awọn ẹya wiwo.
Bawo ni awọn ẹya ṣe papọ kọja awọn ipele ipinnu ọpọ?
Awọn ẹya ipele kọọkan jẹ interpolated trilinearly ati isomọ ṣaaju gbigbe si MLP kekere naa.
Bawo ni Lẹsẹkẹsẹ-NGP ṣe n ṣakoso awọn ikọlu hash ninu awọn tabili ipinnu ti o dara?
Collisions ti wa ni laaye; awọn agbegbe iwuwo giga ṣe agbejade awọn gradients ti o lagbara nitoribẹẹ MLP kekere ati iṣapeye kọ ẹkọ lati yanju awọn iho pipin.
Ni aijọju melo ni Lẹsẹkẹsẹ-NGP ṣe iyara ikẹkọ NeRF?
Nipa gbigbe aṣoju sinu awọn tabili hash ati idinku MLP, ikẹkọ ti o gba awọn wakati le pari ni iṣẹju-aaya.
Tesiwaju kikọ
Jẹmọ awọn itọsọna
Awọn itọsọna diẹ sii ti a yan fun koko yii