Rendering Iyatọ
Imudaniloju iyatọ jẹ ki ilana titan ipo 3D kan si aworan 2D ni kikun iyatọ, nitorinaa o le ṣe iṣiro awọn iwọn gradients lati awọn piksẹli ti a ṣe pada si awọn aye iwoye.
Akopọ
This lets you optimize geometry, materials, lighting, and camera using gradient descent.
Jin Dive
Itumọ aṣa jẹ opopona ọna kan: ifunni ni geometry, awọn ohun elo, awọn ina, ati kamẹra, ati awọn piksẹli jade. Imudaniloju iyatọ yiyipada ti o nṣàn nipa ṣiṣe iṣiro bii piksẹli iṣelọpọ kọọkan ṣe yipada pẹlu ọwọ si gbogbo paramita igbewọle. Pẹlu awọn gradients wọnyẹn, oluṣapejuwe le ṣatunṣe apẹrẹ 3D kan tabi awọn awoara rẹ titi ti aworan ti a ṣe ṣe ibaamu fọto ibi-afẹde kan, eyiti o jẹ ọkan ti ṣiṣe onidakeji ati itupalẹ-nipasẹ-sọpọ. Iṣoro akọkọ ni pe fifisilẹ pẹlu awọn idilọwọ, paapaa ni awọn ojiji biribiri ohun ati awọn egbegbe occlusion, nibiti ẹbun kan ti fo lojiji lati iwaju si abẹlẹ. Awọn ọna bii rasterization rirọ (SoftRas), iṣapẹẹrẹ eti (Li et al.'s redner), ati rasterizer ni PyTorch3D mu iwọnyi mu pẹlu didanu tabi awọn akojọpọ aala pataki. Ikẹkọ NeRF ati 3D Gaussian splatting jẹ awọn ohun elo olokiki.
Imọ-imọ-ẹrọ
Ipenija mojuto ni awọn idiwọ hihan. Ni ojiji biribiri ohun kan, piksẹli kan yọ lati iwaju si abẹlẹ, nitorina itọsẹ itọsẹ jẹ odo fere nibikibi ati aisọye ni eti, ti ko funni ni gradient ti o wulo nipa apẹrẹ. Awọn ojutu boya rọ agbegbe jẹ ki awọn onigun mẹta ṣe alabapin didan, ifẹsẹtẹ to dara si awọn piksẹli to wa nitosi (rasterization rirọ) tabi ṣapejuwe ni gbangba lẹgbẹẹ awọn egbegbe lati ṣe iṣiro ọrọ aala ti isọdọkan (iṣapẹẹrẹ eti).
Ipa Ilana
Iyara ati iwọn
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.
Kọ awọn yiyan
Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.
Ẹgbẹ ati ṣiṣan iṣẹ
Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.
Ojo iwaju ti Rendering Iyatọ
Imudaniloju iyatọ ti di ohun ti o ni asopọ laarin awọn eya aworan ati ẹkọ ti o jinlẹ. Gẹgẹbi awọn oluṣe iyatọ ti akoko gidi ati awọn pipeline Gaussian-splating ti dagba, nireti awọn loops tighter fun atunkọ 3D lati awọn fọto, gbigba ohun elo nkankikan, kikopa roboti pẹlu fisiksi ti o kọ ẹkọ, ati awọn eto ipari-si-opin nibiti pipadanu pipadanu kan nṣan lati aworan ipari ni gbogbo ọna si awọn aye iṣẹlẹ. Itọpa ọna iyatọ fun itanna agbaye ni kikun jẹ aala iwadii ti nṣiṣe lọwọ gbigbe si ilowo.
Real-World imuse
Atunse irisi ohun 3D kan ati sojurigindin lati ọwọ awọn fọto nipa jijẹ awoṣe titi ti awọn ẹda ti o baamu awọn aworan (iṣagbesori onidakeji).
Ikẹkọ NeRFs ati 3D Gaussian splats, nibiti awọn gradients lati awọn iwo ti a ṣe ṣe imudojuiwọn aṣoju ipo naa.
Iṣiro awọn ohun-ini ohun elo (ainira, irisi) nipa ibaamu awọn ifojusi ti a ṣe si aworan gidi kan.
Kamẹra ati isọdọtun iduro ni awọn ẹrọ roboti, ni ibamu awoṣe 3D ti a mọ si aworan kamẹra lati gba ipo rẹ pada.
Awọn ewu & Awọn ọna iṣọ
Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.
Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.
Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.
Ilana Ilana imuse
Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.
Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.
Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.
Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.
Tesiwaju Ṣiṣawari
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Differentiable Rendering quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Itọsọna atẹle
DDSP Iyatọ Audio Synthesis
Awọn ibeere ti a beere nigbagbogbo
What is Differentiable Rendering?
Imudaniloju iyatọ jẹ ki ilana titan ipo 3D kan si aworan 2D ni kikun iyatọ, nitorinaa o le ṣe iṣiro awọn iwọn gradients lati awọn piksẹli ti a ṣe pada si awọn aye iwoye. Eyi n jẹ ki o mu jiometirika, awọn ohun elo, ina, ati kamẹra ṣiṣẹ nipa lilo isọdi-diẹ.
Kini isọdọtun iyatọ jẹ ki o ṣe iṣiro?
Nipa ṣiṣe iyatọ, o gba awọn gradients ti nṣàn lati awọn piksẹli pada si awọn igbewọle iwoye, ti nmu iṣapeye-orisun gradient ṣiṣẹ.
Kini idi ti awọn ojiji biribiri nkan jẹ iṣoro pataki fun ṣiṣe iyatọ?
Ni ojiji biribiri kan pixel kan ya laarin iwaju ati lẹhin, nitorina itọsẹ itọsẹ jẹ odo tabi aisọye ko si ni alaye apẹrẹ.
Bawo ni rasterization asọ ṣe koju iṣoro idaduro naa?
Rasterization rirọ (fun apẹẹrẹ, SoftRas) jẹ ki agbegbe rọra nitoribẹẹ onigun mẹta kọọkan ni irọrun ni ipa awọn piksẹli agbegbe, ti n ṣe agbejade gradients to ṣee lo.
Kini 'itumọ oniyipada'?
Itupalẹ onidakeji nlo ṣiṣe iyatọ lati mu awọn aye aye dara si titi ti aworan ti a ti ṣopọ ṣe baamu fọto ti a ṣakiyesi.
Ilana igbalode wo ni o da lori ṣiṣe iyatọ fun ikẹkọ?
Mejeeji NeRFs ati 3D Gaussian splatting jẹ iṣapeye nipasẹ isọdọtun ipadanu aworan-aaye nipasẹ oluṣe iyatọ.