Akopọ
DUSt3R ṣe atunṣe geometry ipon 3D lati ọwọ diẹ ti awọn fọto lasan laisi nilo awọn ipo kamẹra ti a mọ tabi isọdiwọn. O lu opo gigun ti opo-igbesẹ olona-igbesẹ ibile sinu nẹtiwọọki nkankikan kan ti o kan awọn aaye 3D jade.
DUSt3R Dese 3D Atunkọ jẹ ti awọn iṣan-iṣẹ iṣẹ iran-kọmputa ti o tumọ tabi ṣe agbejade media wiwo fun itupalẹ, awọn iṣẹ ṣiṣe, ati ẹda.
Jin Dive
Atunkọ 3D Ayebaye (igbekalẹ-lati-iṣipopada pẹlu sitẹrio wiwo-pupọ) jẹ ẹwọn ẹlẹgẹ: ṣawari awọn ẹya, baramu wọn, awọn iduro kamẹra siro, triangulate, lẹhinna densify. Ipele kọọkan le kuna, ati pe o nigbagbogbo nilo ọpọlọpọ awọn aworan agbekọja ati awọn intrinsics kamẹra ti a mọ. DUst3R (Wang et al., 2024) ṣe atunṣe gbogbo iṣoro naa. Fi fun awọn aworan meji nikan, nẹtiwọọki ti o da lori ẹrọ iyipada taara ṣe atunṣe 'pointmap' fun ọkọọkan - ipoidojuko 3D ipon fun-pixel, mejeeji ti ṣafihan ni fireemu ipoidojuko kanna. Lati awọn maapu ti o ni ibamu wọnyẹn o le ka ijinle, awọn iduro kamẹra, ati awọn ibaamu fẹrẹẹ fun ọfẹ. Fun diẹ ẹ sii ju awọn aworan meji lọ, DUSt3R ṣe titete agbaye kan ti o di gbogbo awọn maapu ibi-itọka meji sinu awọsanma ojuami deede. O ṣiṣẹ paapaa pẹlu awọn kamẹra ti ko ni iwọn ati diẹ pupọ, awọn iwo aye ti o ni aaye pupọ.
Imọ-imọ-ẹrọ
Ijade mojuto ni maapu aaye: aworan aworan ipon 2D-si-3D ti o gbe gbogbo ẹbun ti aworan si ipo 3D ti o fojuhan, pẹlu awọn aworan mejeeji ti bata kan tun pada sinu fireemu ipoidojuko kamẹra akọkọ. Nitoripe ifọrọranṣẹ jẹ alaiṣedeede ni awọn ipoidojuko 3D ti o pin, ṣe iṣiro ati ibaramu di awọn kika kika isalẹ ju awọn ohun pataki ṣaaju. Ayipada Iran kan pẹlu akiyesi-agbelebu laarin awọn ẹka aworan meji jẹ ki nẹtiwọọki ṣe idi apapọ nipa awọn iwo mejeeji, ẹkọ geometry taara lati awọn ipilẹ data nla ti awọn aworan ti o han.
Mastering DUst3R ipon 3D Atunṣe
DUSt3R ṣe atunṣe geometry ipon 3D lati ọwọ diẹ ti awọn fọto lasan laisi nilo awọn ipo kamẹra ti a mọ tabi isọdiwọn. O lu opo gigun ti opo-igbesẹ olona-igbesẹ ibile sinu nẹtiwọọki nkankikan kan ti o kan awọn aaye 3D jade. DUSt3R Dese 3D Atunkọ jẹ ti awọn iṣan-iṣẹ iṣẹ iran-kọmputa ti o tumọ tabi ṣe agbejade media wiwo fun itupalẹ, awọn iṣẹ ṣiṣe, ati ẹda. Lati kọ oye ti o jinlẹ, ṣe itọju DUSt3R Dese 3D Atunkọ bi awoṣe iṣiṣẹ, kii ṣe ẹya ẹyọkan: ṣalaye awọn abajade ti o fẹ, ṣalaye awọn arosọ, ati yapa ohun ti eto le ṣe ni igbẹkẹle lati ohun ti o tun nilo idajọ amoye.
Ni iṣe, awọn ẹgbẹ ti o lagbara ni lilo iwọntunwọnsi iwọntunwọnsi DUST3R Dense 3D pẹlu awọn otitọ ṣiṣe bii didara data, iyatọ ina, ati isamisi aitasera. Wọn ṣe akọsilẹ awọn ibeere aṣeyọri ti o fojuhan, idanwo lodi si data ojulowo ati ṣiṣan iṣẹ, ati atunbere ti o da lori awọn ilana ikuna ti a ṣakiyesi dipo awọn bori ala-akoko kan. Eyi ni ibiti oye imọ-jinlẹ yipada si agbara ti o tọ kọja ọja, eto imulo, ati awọn iṣẹ ṣiṣe.
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn. Ni akoko kanna, Awọn ẹtọ aworan ati ifọkansi le di awọn eewu labẹ ofin ti o ba jẹ afihan. Ọna resilient julọ julọ ni lati darapọ iyara idanwo pẹlu ibawi ijọba: ṣiṣe awọn awakọ awakọ, mu ẹri mu, ṣe atẹjade awọn iwe ipinnu, ati imudojuiwọn awọn aabo nigbagbogbo bi ihuwasi awoṣe, awọn ireti olumulo, ati awọn ibeere ilana ti dagbasoke.
Ipa Ilana
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.
Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.
Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.
Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.
Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ. Ni awọn imuṣiṣẹ ti o ni agbara giga, eyi ni a tumọ si awọn ofin iṣiṣẹ wiwọn, awọn aala nini, ati awọn ilana atunyẹwo loorekoore ki awọn ẹgbẹ le ṣe iwọn igbẹkẹle dipo iwọn aibikita.
Real-World imuse
Yipada awọn aworan ifẹsẹmulẹ foonu diẹ ti yara kan tabi ohun kan sinu awọsanma aaye 3D ti o ṣee ṣe laisi ṣiṣayẹwo awọn ipo kamẹra.
Imupadabọ awọn iduro kamẹra ati ijinle si bootstrap ibosile 3D atunkọ tabi Gaussian splatting lati fọnka, awọn aworan ti ko ni iwọn.
Atunse awọn iwoye lati ibi ipamọ tabi awọn fọto intanẹẹti nibiti data isọdiwọn kamẹra ko si.
Pese awọn iṣiro jiometirika iyara fun awọn roboti ati lilọ kiri AR lati awọn oju iwo meji tabi mẹta.
Awọn Ilana imuse
DUst3R Ipon 3D Atunṣe ni iwa
Yipada awọn aworan ifẹsẹmulẹ foonu diẹ ti yara kan tabi ohun kan sinu awọsanma aaye 3D ti o ṣee ṣe laisi ṣiṣayẹwo awọn ipo kamẹra.
Yipada awọn aworan ifaworanhan foonu diẹ diẹ ti yara kan tabi ohun kan sinu awọsanma aaye 3D ti o le ṣee ṣe laisi ṣiṣayẹwo awọn ipo kamẹra Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe ni akoko pupọ.
DUst3R Ipon 3D Atunṣe ni iwa
Imupadabọ awọn iduro kamẹra ati ijinle si bootstrap ibosile 3D atunkọ tabi Gaussian splatting lati fọnka, awọn aworan ti ko ni iwọn.
Imupadabọ awọn iduro kamẹra ati ijinle si bootstrap ibosile 3D atunkọ tabi Gaussian splatting lati fọnka, awọn aworan ti ko ni iwọn Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa mejeeji awọn anfani iṣelọpọ ati awọn idiyele aṣiṣe lori akoko.
DUst3R Ipon 3D Atunṣe ni iwa
Atunse awọn iwoye lati ibi ipamọ tabi awọn fọto intanẹẹti nibiti data isọdiwọn kamẹra ko si.
Atunṣe awọn iwoye lati ile ifi nkan pamosi tabi awọn fọto intanẹẹti nibiti data isọdọtun kamẹra ko si Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna igbega eniyan fun awọn ọran eti, ati tọpa awọn anfani iṣelọpọ mejeeji ati awọn idiyele aṣiṣe lori akoko.
DUst3R Ipon 3D Atunṣe ni iwa
Pese awọn iṣiro jiometirika iyara fun awọn roboti ati lilọ kiri AR lati awọn oju iwo meji tabi mẹta.
Pese awọn iṣiro jiometirika iyara fun awọn ẹrọ roboti ati lilọ kiri AR lati awọn oju iwo meji tabi mẹta Awọn ẹgbẹ nigbagbogbo gba awọn abajade to dara julọ nigbati wọn ṣalaye awọn ilodi didara ni iwaju, tọju ọna imudara eniyan fun awọn ọran eti, ati tọpa awọn anfani iṣelọpọ mejeeji ati awọn idiyele aṣiṣe lori akoko.
Awọn ewu & Awọn ọna iṣọ
Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.
Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.
Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.
Ilana Ilana imuse
Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.
Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.
Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.
Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.
Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.
Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.
Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.
Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto. Ṣe itọju igbesẹ kọọkan bi ẹnu-ọna ẹri: ti awọn ibeere ko ba ni ibamu, daduro yiyọ kuro, pa aafo naa, ati lẹhinna faagun lilo.