Plenoxels ati Voxel Radiance Fields
Plenoxels fihan pe o le tun ṣe iṣẹlẹ 3D kan pẹlu awọn abajade didara NeRF laisi eyikeyi nẹtiwọọki nkankikan rara - o kan akoj ti voxels ti o tọju awọ ati iwuwo.
Akopọ
Abajade naa ṣe ikẹkọ ni aijọju 100x yiyara ju NeRF atilẹba lakoko ti o baamu didara wiwo rẹ.
Jin Dive
NeRF ṣaṣeyọri photorealism ṣugbọn o lọra nitori pe gbogbo ayẹwo nilo gbigbe siwaju nipasẹ nẹtiwọọki ti o jinlẹ, ati ikẹkọ le gba awọn wakati tabi awọn ọjọ. Plenoxels (Sara Fridovich-Keil, Alex Yu et al., 2022) beere ibeere imunibinu kan: nẹtiwọọki paapaa pataki? Idahun wọn jẹ rara. Wọn ṣe aṣoju iṣẹlẹ naa bi akoj voxel 3D fọnka. Ọkọọkan voxel ti a tẹdo tọju iye opacity kanṣoṣo pẹlu awọn onisọdipupọ irẹpọ ti iyipo ti o ṣe koodu awọ-igbẹkẹle wiwo. Lati ṣe piksẹli kan, eto trilinearly ṣe agbero awọn iye wọnyi lẹgbẹẹ ray o si ṣe akojọpọ wọn pẹlu ṣiṣe iwọn didun boṣewa. Nitoripe ko si nẹtiwọọki, gbogbo ohun ti wa ni iṣapeye taara pẹlu isunmọ gradient lori awọn iye voxel, deede fun didan. Abajade akọle: didara afiwe si NeRF, ikẹkọ ni awọn iṣẹju lori GPU kan.
Imọ-imọ-ẹrọ
Awọ ti o gbẹkẹle wiwo jẹ apakan ọlọgbọn. Dipo ti nẹtiwọọki ti n ṣe agbejade RGB fun igun wiwo, voxel kọọkan tọju eto kekere ti irẹpọ iyipo (SH) fun ikanni awọ. Ṣiṣayẹwo ipilẹ SH ni itọsọna ray n ṣe atunṣe bi awọ aaye naa ṣe yipada pẹlu oju-ọna - yiya awọn ifojusi pataki ati awọn ifojusọna. Opacity jẹ ominira itọsọna. Iyatọ trilinear interpolation pẹlu fifi iwọn didun jẹ ki gbogbo iye voxel jẹ ikẹkọ taara, nitorinaa iṣapeye jẹ titọ, ti ko ni nẹtiwọọki ti o baamu ni ara ti o kere ju-squares.
Ipa Ilana
Iyara ati iwọn
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.
Kọ awọn yiyan
Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.
Ẹgbẹ ati ṣiṣan iṣẹ
Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.
Ọjọ iwaju ti Plenoxels ati Awọn aaye Radiance Voxel
Plenoxels ṣe afihan pe aṣoju, kii ṣe nẹtiwọọki nkankikan, ṣe awakọ didara NeRF - wiwa ti o tun ṣe aaye naa. O ṣe atilẹyin taara taara ati awọn ọna arabara bii awọn grids hash Instant-NGP ati, nikẹhin, 3D Gaussian Splatting, eyiti o jẹ gaba lori imudanu didan akoko gidi. Reti iṣipopada tẹsiwaju si ọna fojuhan, awọn alakoko ore-GPU ti o ṣe ikẹkọ ni iṣẹju-aaya ti o ṣe ni akoko gidi, pẹlu awọn nẹtiwọọki nkankikan ti a lo ni yiyan dipo bi ile itaja iṣẹlẹ ipilẹ.
Real-World imuse
Ni kiakia n ṣe atunṣe nkan ti o mu sinu ohun-ini 3D ni awọn iṣẹju fun iṣowo e-commerce tabi digitization musiọmu, dipo awọn wakati idaduro.
Afọwọkọ iyara ti iṣelọpọ wiwo aramada lori GPU alabara kan fun iwadii ati ẹkọ.
Ṣiṣẹda ṣiṣatunṣe, awọn iwoye voxel ti o fojuhan ti awọn oṣere le ṣayẹwo taara ati piruni, ko dabi awọn iwuwo nẹtiwọọki opaque.
Ṣiṣẹ bi apẹẹrẹ ikọni pe aṣoju aaye, kii ṣe ẹkọ ti o jinlẹ, jẹ ohun ti o nmu awọn abajade fọtoyiya jade.
Awọn ewu & Awọn ọna iṣọ
Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.
Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.
Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.
Ilana Ilana imuse
Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.
Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.
Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.
Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.
Tesiwaju Ṣiṣawari
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Plenoxels and Voxel Radiance Fields quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Itọsọna atẹle
Awọn aaye Radiance Neural
Awọn ibeere ti a beere nigbagbogbo
Kini Plenoxels ati Voxel Radiance Fields?
Plenoxels fihan pe o le tun ṣe iṣẹlẹ 3D kan pẹlu awọn abajade didara NeRF laisi eyikeyi nẹtiwọọki nkankikan rara - o kan akoj ti voxels ti o tọju awọ ati iwuwo. Abajade ṣe ikẹkọ ni aijọju 100x yiyara ju NeRF atilẹba lọ lakoko ti o baamu didara wiwo rẹ.
Kini yiyan apẹrẹ iyalẹnu julọ ni Plenoxels ni akawe si NeRF?
Plenoxels tọju iṣẹlẹ naa taara ni akoj voxel kan ati pe o mu awọn iye yẹn pọ si, laisi nẹtiwọọki nkankikan ninu opo gigun ti epo.
Kini voxel kọọkan ti o tẹdo ni Plenoxels tọju lati mu awọ ti o gbẹkẹle wiwo?
Voxel kọọkan ni o ni opacity pẹlu awọn onisọdipupọ irẹpọ ti iyipo fun ikanni awọ, eyiti o ṣe koodu bi awọ ṣe yipada pẹlu itọsọna wiwo.
O fẹrẹ to iyara melo ni ikẹkọ Plenoxels ni akawe si NeRF atilẹba?
Nipa yiyọkuro awọn igbasilẹ nẹtiwọọki-ọkọọkan, Plenoxels ṣe ikẹkọ lori aṣẹ ti awọn akoko 100 yiyara, ipari ni awọn iṣẹju.
Bawo ni a ṣe n gba awọn iye lati inu akoj voxel lẹba ray kan?
Plenoxels nlo interpolation trilinear iyatọ lati ka awọ ati opacity laisiyonu laarin awọn ile-iṣẹ voxel.
Ipari ipari wo ni Plenoxels ṣe afihan si aaye naa?
Nipa ibamu didara NeRF laisi nẹtiwọki, Plenoxels ṣe afihan aṣoju ati iṣapeye, kii ṣe MLP, jẹ iduro fun awọn abajade.