Mwongozo wa AI unaoonekana

Kunyunyiza kwa Gaussian

Gaussian Splatting inawakilisha onyesho la 3D kama mamilioni ya vitone vidogo, vya rangi na nusu uwazi ambavyo vinaweza kuonyeshwa kwa wakati halisi.

Muhtasari

Gaussian Splatting inawakilisha onyesho la 3D kama mamilioni ya vitone vidogo, vya rangi na nusu uwazi ambavyo vinaweza kuonyeshwa kwa wakati halisi. Inatoa uhalisia wa picha unaofanana na NeRF huku ikiendesha haraka vya kutosha kwa utazamaji mwingiliano.

Gaussian Splatting ni mali ya utiririshaji wa maono ya kompyuta ambayo hutafsiri au kutoa midia ya kuona kwa uchanganuzi, utendakazi na ubunifu.

Dive ya kina

Ilianzishwa katika SIGGRAPH 2023, 3D Gaussian Splatting huunda upya matukio kutoka kwa picha kama NeRF lakini hutumia uwakilishi dhahiri badala ya mtandao wa neva uliofichwa. Kila onyesho ni wingu la Gaussians za 3D, matone ya duaradufu ya fuzzy, na kila blou huhifadhi nafasi, saizi na mwelekeo (uwiano wake), uwazi, na rangi. Badala ya kurusha miale polepole kupitia mtandao, mbinu ya "splats" blobs hizi moja kwa moja kwenye skrini na kuzichanganya, mchakato ulio karibu na uwekaji kumbukumbu wa jadi na kwa hivyo haraka sana. Mafunzo huanza kutoka kwa wingu haba inayotolewa na urekebishaji wa kamera, kisha huboresha matone huku wakiongeza maelezo ambayo eneo halijajengwa upya na kupogoa ambapo kuna watu wengi zaidi. Matokeo yake ni uwasilishaji wa wakati halisi katika 1080p na ubora unaoshindana na NeRF bora zaidi, ndiyo maana unaenea kwa haraka kupitia michoro na zana za kunasa.

Ufahamu wa Kiufundi

Ufunguo ni rasterizer ya msingi wa vigae inayoweza kutofautishwa. 3D Gaussians inakadiriwa kuwa 2D, iliyopangwa kwa kina, na kuunganishwa kwa alfa kwa kila kigae cha skrini, kwa hivyo uwasilishaji huepuka kuandamana kwa miale ya kila pikseli ambayo hufanya NeRF polepole. Rangi huhifadhiwa kwa ulinganifu wa duara, ikiruhusu kila ua ibadilishe mwonekano kwa pembe ya kutazama ili kunasa uakisi. Kwa sababu bomba zima linaweza kutofautishwa, mteremko sawa wa upinde rangi unaolingana na picha unaotumiwa na NeRF huboresha nafasi, maumbo, mwangaza na rangi za blob, huku hatua ya msongamano hukua au kugawanya Gaussians ili kuongeza maelezo yanayokosekana.

Utaalam wa Kunyunyiza kwa Gaussian

Gaussian Splatting inawakilisha onyesho la 3D kama mamilioni ya vitone vidogo, vya rangi na nusu uwazi ambavyo vinaweza kuonyeshwa kwa wakati halisi. Inatoa uhalisia wa picha unaofanana na NeRF huku ikiendesha haraka vya kutosha kwa utazamaji mwingiliano. Gaussian Splatting ni mali ya utiririshaji wa maono ya kompyuta ambayo hutafsiri au kutoa midia ya kuona kwa uchanganuzi, utendakazi na ubunifu. Ili kujenga uelewa wa kina, chukulia Gaussian Splatting kama kielelezo cha uendeshaji, si kipengele kimoja: fafanua matokeo unayotaka, fafanua dhana, na utenganishe kile ambacho mfumo unaweza kufanya kwa uhakika na kile ambacho bado kinahitaji uamuzi wa kitaalamu.

Katika mazoezi, timu dhabiti zinazotumia usahihi wa mizani ya Gaussian Splatting na hali halisi ya uendeshaji kama vile ubora wa data, tofauti ya mwanga na uthabiti wa lebo. Huandika vigezo dhahiri vya kufaulu, kujaribu dhidi ya data halisi na mtiririko wa kazi, na kurudia kulingana na mifumo ya kushindwa iliyoonekana badala ya ushindi wa mara moja wa benchmark. Hapa ndipo uelewa wa kinadharia unapogeuka kuwa uwezo wa kudumu katika bidhaa, sera na uendeshaji.

Visual AI inaweza kufanya ukaguzi, ugunduzi na kazi za kuweka lebo kiotomatiki kwa kiwango. Wakati huo huo, haki za picha na idhini zinaweza kuwa hatari za kisheria ikiwa asili haiko wazi. Mbinu thabiti zaidi ni kuchanganya kasi ya majaribio na nidhamu ya utawala: kuendesha majaribio, kunasa ushahidi, kuchapisha kumbukumbu za maamuzi, na kuendelea kusasisha ulinzi huku tabia ya kielelezo, matarajio ya watumiaji na mahitaji ya udhibiti yanapobadilika.

Athari za kimkakati

Visual AI inaweza kufanya ukaguzi, ugunduzi na kazi za kuweka lebo kiotomatiki kwa kiwango.

Visual AI inaweza kufanya ukaguzi, ugunduzi na kazi za kuweka lebo kiotomatiki kwa kiwango. Katika utumaji wa ubora wa juu, hii inatafsiriwa katika sheria zinazoweza kupimika za uendeshaji, mipaka ya umiliki, na desturi za ukaguzi wa mara kwa mara ili timu ziweze kuongeza imani badala ya kuongeza utata.

Timu bunifu zinaweza kuiga dhana kwa haraka zaidi na masahihisho machache ya mikono.

Timu bunifu zinaweza kuiga dhana kwa haraka zaidi na masahihisho machache ya mikono. Katika utumaji wa ubora wa juu, hii inatafsiriwa katika sheria zinazoweza kupimika za uendeshaji, mipaka ya umiliki, na desturi za ukaguzi wa mara kwa mara ili timu ziweze kuongeza imani badala ya kuongeza utata.

Uendeshaji unaweza kutumia ishara za picha na video ambazo hapo awali zilikuwa ngumu kuchakata.

Uendeshaji unaweza kutumia ishara za picha na video ambazo hapo awali zilikuwa ngumu kuchakata. Katika utumaji wa ubora wa juu, hii inatafsiriwa katika sheria zinazoweza kupimika za uendeshaji, mipaka ya umiliki, na desturi za ukaguzi wa mara kwa mara ili timu ziweze kuongeza imani badala ya kuongeza utata.

Mustakabali wa Kunyunyiza kwa Gaussian

Gaussian Splatting inasonga kwa kasi kutoka kwa utafiti hadi bidhaa za kunasa 3D, uchoraji wa ramani na utayarishaji wa mtandaoni, kwa kiasi fulani kwa sababu hutoa kwa wakati halisi kwenye GPU za watumiaji na hata vivinjari. Kazi inayoendelea inalenga kupunguza ukubwa wa faili (mandhari inaweza kuwa kubwa), kushughulikia matukio yanayobadilika na yaliyohuishwa, kuwasha tena, na kuhariri vitu binafsi. Tarajia muunganisho mkali zaidi na injini za mchezo na AR/VR, mbinu mseto zinazochanganya splats na meshes, na kunasa kutoka kwa video ya simu. Inazidi kuonekana kama kijalizo cha vitendo kwa, au uingizwaji wa, NeRF popote kasi ya mwingiliano inahusika.

Utekelezaji wa Ulimwengu Halisi

Kuunda picha za 3D za wakati halisi, zinazoweza kutambulika za vyumba au bidhaa za wavuti

Utayarishaji pepe na taswira ya awali ya filamu kwa kutumia picha halisi, seti zinazoweza kusomeka

Uchanganuzi wa haraka wa 3D wa vitu na mazingira kutoka kwa simu au video ya drone

Kuunda matukio wasilianifu ya Uhalisia Pepe ambayo yanaendeshwa kwa urahisi kwenye maunzi ya watumiaji

Miundo ya Utekelezaji

Gaussian Splatting katika mazoezi

Kuunda picha za 3D za wakati halisi, zinazoweza kutambulika za vyumba au bidhaa za wavuti.

Kuunda picha za 3D zinazotambulika za vyumba au bidhaa za wavuti kwa kawaida hupata matokeo bora zaidi zinapofafanua viwango vya juu vya ubora, kuweka njia ya kupanda juu ya hali ya kibinadamu, na kufuatilia faida za tija na gharama za hitilafu kwa wakati.

Gaussian Splatting katika mazoezi

Utayarishaji pepe na taswira ya awali ya filamu kwa kutumia picha halisi, seti zinazoweza kusomeka.

Uzalishaji pepe na taswira ya awali ya filamu kwa kutumia picha halisi, seti zinazoweza kusomeka Timu kwa kawaida hupata matokeo bora zaidi zinapofafanua viwango vya juu vya ubora, kuweka njia ya kupanda kwa binadamu kwa matukio makali, na kufuatilia faida za tija na gharama za makosa kwa wakati.

Gaussian Splatting katika mazoezi

Uchanganuzi wa haraka wa 3D wa vitu na mazingira kutoka kwa simu au video ya drone.

Uchanganuzi wa haraka wa 3D wa vitu na mazingira kutoka kwa simu au video zisizo na rubani kwa kawaida Timu hupata matokeo bora zaidi zinapofafanua viwango vya juu vya ubora mbele, kuweka njia ya kupanda kwa binadamu kwa matukio makali, na kufuatilia faida za tija na gharama za makosa kwa wakati.

Gaussian Splatting katika mazoezi

Kuunda matukio wasilianifu ya Uhalisia Pepe ambayo yanaendeshwa kwa urahisi kwenye maunzi ya watumiaji.

Kuunda matukio shirikishi ya Uhalisia Ulioboreshwa ambayo huendeshwa kwa urahisi kwenye maunzi ya Watumiaji Timu kwa kawaida hupata matokeo bora zaidi zinapofafanua viwango vya juu vya ubora, kuweka njia ya kupanda kwa binadamu kwa matukio makali, na kufuatilia faida za tija na gharama za makosa kwa wakati.

Hatari & Walinzi

!

Haki za picha na idhini zinaweza kuwa hatari za kisheria ikiwa asili haiko wazi.

!

Utendaji wa muundo unaweza kutofautiana katika mwangaza, idadi ya watu na mazingira.

!

Chanya za uwongo zinaweza kutotambuliwa isipokuwa viwango vya uaminifu vifuatiliwe.

Ramani ya Utekelezaji

1

Bainisha vigezo vya kukubalika vya usahihi, kumbukumbu na gharama za makosa.

Bainisha vigezo vya kukubalika vya usahihi, kumbukumbu na gharama za makosa. Chukulia kila hatua kama lango la ushahidi: ikiwa vigezo havitatimizwa, sitisha uchapishaji, funga pengo, kisha upanue matumizi.

2

Jaribu kwa kutumia data inayolingana na hali halisi ya uzalishaji.

Jaribu kwa kutumia data inayolingana na hali halisi ya uzalishaji. Chukulia kila hatua kama lango la ushahidi: ikiwa vigezo havitatimizwa, sitisha uchapishaji, funga pengo, kisha upanue matumizi.

3

Ongeza ukaguzi wa kibinadamu kwa utabiri wa chini au utabiri wa athari kubwa.

Ongeza ukaguzi wa kibinadamu kwa utabiri wa chini au utabiri wa athari kubwa. Chukulia kila hatua kama lango la ushahidi: ikiwa vigezo havitatimizwa, sitisha uchapishaji, funga pengo, kisha upanue matumizi.

4

Fuatilia mtindo wa kuteleza na uthibitishe upya baada ya mabadiliko ya kamera au mkusanyiko wa data.

Fuatilia mtindo wa kuteleza na uthibitishe upya baada ya mabadiliko ya kamera au mkusanyiko wa data. Chukulia kila hatua kama lango la ushahidi: ikiwa vigezo havitatimizwa, sitisha uchapishaji, funga pengo, kisha upanue matumizi.

Endelea Kuchunguza