Akopọ
DreamFusion ṣe ipilẹṣẹ awọn nkan 3D lati ọrọ nipa lilo awoṣe itanka aworan 2D bi alariwisi, ko ṣe ikẹkọ lori eyikeyi data 3D. Ipilẹṣẹ ipilẹ rẹ, Iṣayẹwo Distillation Score, di ohunelo ipilẹ fun gbogbo aaye ọrọ-si-3D.
DreamFusion ati Iṣayẹwo Distillation Score jẹ ti awọn ṣiṣan iṣẹ-iriran kọnputa ti o tumọ tabi ṣe ipilẹṣẹ media wiwo fun itupalẹ, awọn iṣẹ ṣiṣe, ati ẹda.
Jin Dive
DreamFusion, lati Google ni ọdun 2022, beere: Njẹ awoṣe ọrọ-si-aworan 2D kan le kọ oju iṣẹlẹ 3D kan lati wo ọtun lati gbogbo igun? O ṣe iṣapeye NeRF kan (Aaye Radiance Neural) ki awọn igbejade lati awọn oju-ọna kamẹra laileto, nigba ariwo ati ti o han si awoṣe itankale tutunini (Imagen), Dimegilio bi awọn aworan ti o ṣeeṣe fun tọ ọrọ naa. Ni pataki ko lo data ikẹkọ 3D. Aṣeyọri naa jẹ Iṣayẹwo Distillation Score (SDS): dipo isọdọtun nipasẹ awoṣe itọka U-Net gbowolori, SDS nlo ariwo asọtẹlẹ awoṣe bi ifihan agbara gradient taara lori awọn piksẹli ti a ṣe. Yiyi pada kọja awọn ẹgbẹẹgbẹrun awọn oju iwo ṣe ere dukia 3D isokan, ni pipe pẹlu jiometirika ati irisi ti o gbẹkẹle wiwo, lati gbolohun kan.
Imọ-imọ-ẹrọ
SDS ṣe itọju awoṣe itankale bi iṣẹ igbelewọn tio tutunini. O funni ni NeRF, n ṣafikun ariwo, beere U-Net kaakiri lati ṣe asọtẹlẹ ariwo naa, ati ṣe iṣiro iwọn didun bi (ariwo asọtẹlẹ iyokuro ariwo ti a ṣafikun) titari pada si aworan ti a ṣe ati nitorinaa awọn iwuwo NeRF. Foju U-Net Jacobian jẹ ki o ṣee ṣe. Itọnisọna ti ko ni kilasika giga (ni ayika 100) ni a nilo fun awọn abajade didasilẹ, eyiti o fa ihuwasi ti o kun pupọ, nigbakan blurry 'wo DreamFusion'.
Titunto si DreamFusion ati Iṣapẹẹrẹ Distillation Dimegilio
DreamFusion ṣe ipilẹṣẹ awọn nkan 3D lati ọrọ nipa lilo awoṣe itanka aworan 2D bi alariwisi, ko ṣe ikẹkọ lori eyikeyi data 3D. Ipilẹṣẹ ipilẹ rẹ, Iṣayẹwo Distillation Score, di ohunelo ipilẹ fun gbogbo aaye ọrọ-si-3D. DreamFusion ati Iṣayẹwo Distillation Score jẹ ti awọn ṣiṣan iṣẹ-iriran kọnputa ti o tumọ tabi ṣe ipilẹṣẹ media wiwo fun itupalẹ, awọn iṣẹ ṣiṣe, ati ẹda. Lati kọ oye ti o jinlẹ, tọju DreamFusion ati Iṣayẹwo Distillation Score bi awoṣe iṣẹ, kii ṣe ẹya ẹyọkan: ṣalaye awọn abajade ti o fẹ, ṣe alaye awọn arosọ, ati lọtọ ohun ti eto le ṣe ni igbẹkẹle lati ohun ti o tun nilo idajọ amoye.
Ni iṣe, awọn ẹgbẹ ti o lagbara ni lilo DreamFusion ati Score Distillation Sampling išedede iwọntunwọnsi pẹlu awọn ojulowo iṣẹ ṣiṣe bii didara data, iyatọ ina, ati isamisi aitasera. Wọn ṣe akọsilẹ awọn ibeere aṣeyọri ti o fojuhan, idanwo lodi si data ojulowo ati ṣiṣan iṣẹ, ati atunbere ti o da lori awọn ilana ikuna ti a ṣakiyesi dipo awọn bori ala-akoko kan. Eyi ni ibiti oye imọ-jinlẹ yipada si agbara ti o tọ kọja ọja, eto imulo, ati awọn iṣẹ ṣiṣe.
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn. Ni akoko kanna, Awọn ẹtọ aworan ati ifọkansi le di awọn eewu labẹ ofin ti o ba jẹ afihan. Ọna resilient julọ julọ ni lati darapọ iyara idanwo pẹlu ibawi ijọba: ṣiṣe awọn awakọ awakọ, mu ẹri mu, ṣe atẹjade awọn iwe ipinnu, ati imudojuiwọn awọn aabo nigbagbogbo bi ihuwasi awoṣe, awọn ireti olumulo, ati awọn ibeere ilana ti dagbasoke.
Ipa Ilana
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.
Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.
Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.
Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.
Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.
Real-World imuse
Ṣiṣẹda awoṣe 3D ti 'Fọto DSLR kan ti okere ti o wọ fila kekere kan' lati ọrọ nikan
Ṣiṣẹda ere ere ati awọn ohun-ini AR laisi fifin 3D afọwọṣe
Ṣiṣejade awọn meshes okeere ti awọn oṣere n ṣatunṣe dipo ti kọ lati ibere
Awọn ipilẹ iwadi fun iṣiro awọn ọna tuntun-si-3D lodi si SDS
Awọn Ilana imuse
DreamFusion ati Iṣapẹẹrẹ Distillation Dimegilio ni iṣe
Ṣiṣẹda awoṣe 3D ti 'Fọto DSLR kan ti okere ti o wọ fila kekere' lati ọrọ nikan.
Ṣiṣẹda awoṣe 3D kan ti 'Fọto DSLR ti okere kan ti o wọ fila kekere' lati ọrọ nikan Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe lori akoko.
DreamFusion ati Iṣapẹẹrẹ Distillation Dimegilio ni iṣe
Ṣiṣẹda ere ere ati awọn ohun-ini AR laisi fifin 3D afọwọṣe.
Ṣiṣẹda ere ere ati awọn ohun-ini AR laisi awọn ẹgbẹ afọwọṣe 3D afọwọṣe nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna igbega eniyan fun awọn ọran eti, ati tọpa awọn anfani iṣelọpọ mejeeji ati awọn idiyele aṣiṣe lori akoko.
DreamFusion ati Iṣapẹẹrẹ Distillation Dimegilio ni iṣe
Ṣiṣejade awọn meshes okeere ti awọn oṣere n ṣatunṣe dipo ti kọ lati ibere.
Ṣiṣejade awọn meshes okeere ti awọn oṣere n ṣatunṣe dipo kikọ lati ibere Awọn ẹgbẹ nigbagbogbo gba awọn abajade ti o dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna igbega eniyan fun awọn ọran eti, ati tọpa awọn anfani iṣelọpọ mejeeji ati awọn idiyele aṣiṣe ni akoko pupọ.
DreamFusion ati Iṣapẹẹrẹ Distillation Dimegilio ni iṣe
Awọn ipilẹ iwadi fun iṣiro awọn ọna tuntun-si-3D lodi si SDS.
Awọn ipilẹ ti iwadii fun iṣiro awọn ọna tuntun-si-3D lodi si Awọn ẹgbẹ SDS nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa awọn anfani iṣelọpọ mejeeji ati awọn idiyele aṣiṣe lori akoko.
Awọn ewu & Awọn ọna iṣọ
Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.
Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.
Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.
Ilana Ilana imuse
Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.
Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.
Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.
Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.
Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.
Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.
Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.
Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.