Magic3D Ọrọ-to-3D Pipeline
Magic3D jẹ idahun ipele meji ti NVIDIA si DreamFusion, ti n ṣe ipinnu giga-giga, akoonu 3D alaye diẹ sii yiyara.
Akopọ
O jẹ ki ọrọ ti o da lori SDS-si-3D wulo to lati tọka si awọn ṣiṣan iṣẹda ẹda gidi.
Jin Dive
Magic3D, lati NVIDIA ni ọdun 2022, kọlu awọn aaye irora nla meji ti DreamFusion: ilọra ati alaye kekere. O pin iran sinu ipele isokuso ati ipele ti o dara. Ipele isokuso nlo itọka ipin-kekere ṣaaju pẹlu aaye ti o ni iyara hash-grid (ara ara NGP lẹsẹkẹsẹ) lati yara ni inira jade geometry. Aaye yẹn yoo yipada si apapo onigun mẹta ti ifojuri. Ipele ti o dara julọ ṣe iṣapeye apapo taara taara pẹlu awoṣe itọjade wiwakọ giga-giga (Itan kaakiri ni aaye wiwakọ), ni lilo rasterization iyatọ lati pọn awọn alaye dada ati sojurigindin. NVIDIA ṣe ijabọ aijọju iyara 2x kan lori DreamFusion lakoko jiṣẹ awọn abajade ipinnu ti o ga julọ, ati pe iṣelọpọ mesh jẹ ṣiṣatunṣe taara ni awọn irinṣẹ awọn eya aworan boṣewa.
Imọ-imọ-ẹrọ
Ipele ti o dara julọ jẹ ohun ti o ṣii didara. Nipa tajasita aaye isokuso si apapo ti o fojuhan ati fifunni pẹlu rasterization iyatọ, Magic3D kan awọn gradients SDS ni ipinnu giga ni imunadoko, nkan ti ko wulo pẹlu imuṣiṣẹ NeRF iwọn didun ipon. Ṣiṣẹda kaakiri keji ṣaaju ni aaye wiwaba jẹ ki o ṣakoso awọn alaye kilasi 512x512 ni olowo poku. Imudani-si-itanran ti o dara tumọ si pe ipele kọọkan lo aṣoju ti o baamu ti o dara julọ si iṣẹ rẹ: aaye ti ko tọ fun geometry sare, apapo fun isọdọtun agaran.
Ipa Ilana
Iyara ati iwọn
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.
Kọ awọn yiyan
Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.
Ẹgbẹ ati ṣiṣan iṣẹ
Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.
Ojo iwaju ti Pipeline Ọrọ-si-3D Magic3D
Magic3D ṣe iṣeto isokuso-si-itanran, awoṣe isọdọtun apapo ni bayi wọpọ ni ọrọ-si-3D. Awọn ọna ṣiṣe tuntun Titari si ani iyara siwaju iran kikọ sii, wiwo ọpọlọpọ awọn iṣaju deede lati ṣatunṣe awọn ohun-ọṣọ Janus, ati awọn aṣoju Gaussian Splatting. Reti awọn opo gigun ti epo ti o ṣejade iṣelọpọ-ṣetan, ti ya aworan UV, awọn ohun-ini ere laaye ni iṣẹju-aaya si awọn iṣẹju, ti o pọ si taara sinu awọn ẹrọ ere ati awọn irinṣẹ akoonu 3D fun awọn apẹẹrẹ.
Real-World imuse
Ṣiṣẹda apapo ifojuri ti o le ṣatunkọ ti 'ọpọlọ majele-dart buluu kan lori lili omi' lati itọsẹ kan
Ṣiṣejade awọn atilẹyin 3D ti o ga-giga fun awọn ere yiyara ju DreamFusion
Ṣiṣatunṣe orisun ni kiakia nibiti iyipada ọrọ ṣe atunṣe awoṣe 3D ti o wa tẹlẹ
Titajaja awọn meshes sinu Blender tabi awọn ẹrọ ere fun mimọ olorin ati ere idaraya
Awọn ewu & Awọn ọna iṣọ
Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.
Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.
Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.
Ilana Ilana imuse
Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.
Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.
Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.
Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.
Tesiwaju Ṣiṣawari
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Magic3D Text-to-3D Pipeline quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Itọsọna atẹle
Ọrọ-si-3D Iran
Awọn ibeere ti a beere nigbagbogbo
Kini Pipeline Ọrọ-si-3D Magic3D?
Magic3D jẹ idahun ipele meji ti NVIDIA si DreamFusion, ti n ṣe ipinnu giga-giga, akoonu 3D alaye diẹ sii yiyara. O jẹ ki ọrọ ti o da lori SDS-si-3D wulo to lati tọka si awọn ṣiṣan iṣẹda ẹda gidi.
Ilana gbogbogbo wo ni o ṣalaye opo gigun ti epo Magic3D?
Magic3D nlo ipele isokuso fun geometry ti o ni inira ati ipele ti o dara fun alaye ipinnu-giga.
Aṣoju wo ni ipele itanran dara julọ fun awọn alaye agaran?
Aaye isokuso jẹ iyipada si apapo kan, lẹhinna ti refaini pẹlu rasterization iyatọ ni ipinnu giga.
Kini o yara si iṣiro geometry ipele isokuso?
Aaye aaye nkankikan hash-grid yara jẹ ki Magic3D ni inira jade geometry ni iyara ni ipinnu kekere.
Ni aijọju bawo ni iyara ti NVIDIA ṣe ijabọ Magic3D lati wa ni idakeji DreamFusion?
Magic3D ṣe ijabọ aijọju iyara 2x lakoko ti o tun n gbejade ni pataki awọn abajade ipinnu giga.
Kini idi ti ipele ti o dara n ṣiṣẹ itankale rẹ ṣaaju ni aaye wiwaba?
Itankale aaye wiwaba (Stable Diffusion ara) jẹ ki Magic3D ṣe itọsọna awọn alaye kilasi 512 laisi idiyele ti fifun ni kikun-piksẹli.