Visual AI Itọsọna

Plenoxels ati Voxel Radiance Fields

Plenoxels fihan pe o le tun ṣe iṣẹlẹ 3D kan pẹlu awọn abajade didara NeRF laisi eyikeyi nẹtiwọọki nkankikan rara - o kan akoj ti voxels ti o tọju awọ ati iwuwo.

Akopọ

Plenoxels fihan pe o le tun ṣe iṣẹlẹ 3D kan pẹlu awọn abajade didara NeRF laisi eyikeyi nẹtiwọọki nkankikan rara - o kan akoj ti voxels ti o tọju awọ ati iwuwo. Abajade ṣe ikẹkọ ni aijọju 100x yiyara ju NeRF atilẹba lọ lakoko ti o baamu didara wiwo rẹ.

Plenoxels ati Awọn aaye Radiance Voxel jẹ ti awọn iṣan-iṣẹ iṣẹ iran-kọmputa ti o tumọ tabi ṣe agbejade media wiwo fun itupalẹ, awọn iṣẹ ṣiṣe, ati ẹda.

Jin Dive

NeRF ṣaṣeyọri photorealism ṣugbọn o lọra nitori pe gbogbo ayẹwo nilo gbigbe siwaju nipasẹ nẹtiwọọki ti o jinlẹ, ati ikẹkọ le gba awọn wakati tabi awọn ọjọ. Plenoxels (Sara Fridovich-Keil, Alex Yu et al., 2022) beere ibeere imunibinu kan: nẹtiwọọki paapaa pataki? Idahun wọn jẹ rara. Wọn ṣe aṣoju iṣẹlẹ naa bi akoj voxel 3D fọnka. Ọkọọkan voxel ti a tẹdo tọju iye opacity kanṣoṣo pẹlu awọn onisọdipupọ irẹpọ ti iyipo ti o ṣe koodu awọ-igbẹkẹle wiwo. Lati ṣe piksẹli kan, eto trilinearly ṣe agbero awọn iye wọnyi lẹgbẹẹ ray o si ṣe akojọpọ wọn pẹlu ṣiṣe iwọn didun boṣewa. Nitoripe ko si nẹtiwọọki, gbogbo ohun ti wa ni iṣapeye taara pẹlu isunmọ gradient lori awọn iye voxel, deede fun didan. Abajade akọle: didara afiwe si NeRF, ikẹkọ ni awọn iṣẹju lori GPU kan.

Imọ-imọ-ẹrọ

Awọ ti o gbẹkẹle wiwo jẹ apakan ọlọgbọn. Dipo ti nẹtiwọọki ti n ṣe agbejade RGB fun igun wiwo, voxel kọọkan tọju eto kekere ti irẹpọ iyipo (SH) fun ikanni awọ. Ṣiṣayẹwo ipilẹ SH ni itọsọna ray n ṣe atunṣe bi awọ aaye naa ṣe yipada pẹlu oju-ọna - yiya awọn ifojusi pataki ati awọn ifojusọna. Opacity jẹ ominira itọsọna. Iyatọ trilinear interpolation pẹlu fifi iwọn didun jẹ ki gbogbo iye voxel jẹ ikẹkọ taara, nitorinaa iṣapeye jẹ titọ, ti ko ni nẹtiwọọki ti o baamu ni ara ti o kere ju-squares.

Titunto si Plenoxels ati Voxel Radiance Fields

Plenoxels fihan pe o le tun ṣe iṣẹlẹ 3D kan pẹlu awọn abajade didara NeRF laisi eyikeyi nẹtiwọọki nkankikan rara - o kan akoj ti voxels ti o tọju awọ ati iwuwo. Abajade ṣe ikẹkọ ni aijọju 100x yiyara ju NeRF atilẹba lọ lakoko ti o baamu didara wiwo rẹ. Plenoxels ati Awọn aaye Radiance Voxel jẹ ti awọn iṣan-iṣẹ iṣẹ iran-kọmputa ti o tumọ tabi ṣe agbejade media wiwo fun itupalẹ, awọn iṣẹ ṣiṣe, ati ẹda. Lati kọ oye ti o jinlẹ, tọju Plenoxels ati Voxel Radiance Fields bi awoṣe iṣẹ, kii ṣe ẹya ẹyọkan: ṣalaye awọn abajade ti o fẹ, ṣe alaye awọn arosọ, ati lọtọ ohun ti eto le ṣe ni igbẹkẹle lati ohun ti o tun nilo idajọ amoye.

Ni iṣe, awọn ẹgbẹ ti o lagbara ni lilo Plenoxels ati Voxel Radiance Fields iwọntunwọnsi deede pẹlu awọn otitọ iṣẹ ṣiṣe bii didara data, iyatọ ina, ati isamisi aitasera. Wọn ṣe akọsilẹ awọn ibeere aṣeyọri ti o fojuhan, idanwo lodi si data ojulowo ati ṣiṣan iṣẹ, ati atunbere ti o da lori awọn ilana ikuna ti a ṣakiyesi dipo awọn bori ala-akoko kan. Eyi ni ibiti oye imọ-jinlẹ yipada si agbara ti o tọ kọja ọja, eto imulo, ati awọn iṣẹ ṣiṣe.

Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn. Ni akoko kanna, Awọn ẹtọ aworan ati ifọkansi le di awọn eewu labẹ ofin ti o ba jẹ afihan. Ọna resilient julọ julọ ni lati darapọ iyara idanwo pẹlu ibawi ijọba: ṣiṣe awọn awakọ awakọ, mu ẹri mu, ṣe atẹjade awọn iwe ipinnu, ati imudojuiwọn awọn aabo nigbagbogbo bi ihuwasi awoṣe, awọn ireti olumulo, ati awọn ibeere ilana ti dagbasoke.

Ipa Ilana

Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.

Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.

Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.

Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.

Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.

Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.

Ọjọ iwaju ti Plenoxels ati Awọn aaye Radiance Voxel

Plenoxels ṣe afihan pe aṣoju, kii ṣe nẹtiwọọki nkankikan, ṣe awakọ didara NeRF - wiwa ti o tun ṣe aaye naa. O ṣe atilẹyin taara taara ati awọn ọna arabara bii awọn grids hash Instant-NGP ati, nikẹhin, 3D Gaussian Splatting, eyiti o jẹ gaba lori imudanu didan akoko gidi. Reti iṣipopada tẹsiwaju si ọna fojuhan, awọn alakoko ore-GPU ti o ṣe ikẹkọ ni iṣẹju-aaya ti o ṣe ni akoko gidi, pẹlu awọn nẹtiwọọki nkankikan ti a lo ni yiyan dipo bi ile itaja iṣẹlẹ ipilẹ.

Real-World imuse

Ni kiakia n ṣe atunṣe nkan ti o mu sinu ohun-ini 3D ni awọn iṣẹju fun iṣowo e-commerce tabi digitization musiọmu, dipo awọn wakati idaduro.

Afọwọkọ iyara ti iṣelọpọ wiwo aramada lori GPU alabara kan fun iwadii ati ẹkọ.

Ṣiṣẹda ṣiṣatunṣe, awọn iwoye voxel ti o fojuhan ti awọn oṣere le ṣayẹwo taara ati piruni, ko dabi awọn iwuwo nẹtiwọọki opaque.

Ṣiṣẹ bi apẹẹrẹ ikọni pe aṣoju aaye, kii ṣe ẹkọ ti o jinlẹ, jẹ ohun ti o nmu awọn abajade fọtoyiya jade.

Awọn Ilana imuse

Plenoxels ati Awọn aaye Radiance Voxel ni iṣe

Ni kiakia n ṣe atunṣe nkan ti o mu sinu ohun-ini 3D ni awọn iṣẹju fun iṣowo e-commerce tabi digitization musiọmu, dipo awọn wakati idaduro.

Ni kiakia tunṣe ohun ti o gba sinu ohun-ini 3D ni awọn iṣẹju fun iṣowo e-commerce tabi digitization musiọmu, dipo awọn wakati iduro Awọn ẹgbẹ nigbagbogbo gba awọn abajade ti o dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe ni akoko pupọ.

Plenoxels ati Awọn aaye Radiance Voxel ni iṣe

Afọwọkọ iyara ti iṣelọpọ wiwo aramada lori GPU alabara kan fun iwadii ati ẹkọ.

Afọwọkọ iyara ti iṣelọpọ-iwo aramada lori GPU alabara kan fun iwadii ati eto-ẹkọ Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa awọn anfani iṣelọpọ mejeeji ati awọn idiyele aṣiṣe lori akoko.

Plenoxels ati Awọn aaye Radiance Voxel ni iṣe

Ṣiṣẹda ṣiṣatunṣe, awọn iwoye voxel ti o fojuhan ti awọn oṣere le ṣayẹwo taara ati piruni, ko dabi awọn iwuwo nẹtiwọọki opaque.

Ṣiṣẹda ṣiṣatunṣe, awọn iwoye voxel ti o han gbangba ti awọn oṣere le ṣayẹwo taara ati piruni, ko dabi awọn iwuwo nẹtiwọọki opaque Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe lori akoko.

Plenoxels ati Awọn aaye Radiance Voxel ni iṣe

Ṣiṣẹ bi apẹẹrẹ ikọni pe aṣoju aaye, kii ṣe ẹkọ ti o jinlẹ, jẹ ohun ti o nmu awọn abajade fọtoyiya jade.

Ṣiṣẹ bi apẹẹrẹ ikọni pe aṣoju aaye, kii ṣe ẹkọ ti o jinlẹ, jẹ ohun ti o ṣe awọn abajade fọtoyiya Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa awọn anfani iṣelọpọ mejeeji ati awọn idiyele aṣiṣe lori akoko.

Awọn ewu & Awọn ọna iṣọ

!

Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.

!

Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.

!

Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.

Ilana Ilana imuse

1

Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.

Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.

2

Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.

Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.

3

Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.

Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.

4

Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.

Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.

Tesiwaju Ṣiṣawari