Nchịkọta
Amụma mgbasa ozi na-emetụta otu echiche nkwuwa okwu dị n'azụ ndị na-emepụta ihe oyiyi dị ka Stable Diffusion na njikwa robot: kama ịkọ otu ihe na-esote, ọ na-ewepụta usoro dị mkpirikpi nke omume ga-eme n'ọdịnihu site na imezi mkpọtụ. Ọ dị mkpa n'ihi na ọ na-ejikwa ụdị aghụghọ dị iche iche na-adịghị mma, nke dị n'ezie nke ọma karịa ụzọ ochie.
Amụma mgbasa ozi maka njikwa Robot bụ nke usoro ọrụ kọmputa-ọhụụ nke na-akọwa ma ọ bụ mepụta mgbasa ozi anya maka nyocha, ọrụ na imepụta ihe.
Ime miri emi
Ewebata na 2023 site n'aka ndị nyocha na Columbia, MIT, na Toyota Research Institute, amụma mgbasa na-emegharị mmụta visuomotor dị ka nkwuputa ọnọdụ. Nyere onyonyo igwefoto n'oge na-adịbeghị anya yana steeti robot, ọ na-amalite site na mkpọtụ na-enweghị usoro wee na-agba ọtụtụ usoro nkwutọ iji mepụta 'mmemme mgbochị' - kwuo usoro 8 ruo 16 na-esote nke njedebe-mmetụta. Nnukwu mmeri bụ multimodality: mgbe ọrụ nwere ọtụtụ ngwọta dị mma (ị nwere ike ijide otu iko site n'aka ekpe ma ọ bụ aka nri), nlọghachi azụ omenala na-eme ka ha ghọọ ihe ọjọọ n'etiti, ebe ụdị mgbasa ozi nwere ike ime nke ọma na otu ọnọdụ. Ọ na-amụtakwa nke ọma site na ngosipụta nke mmadụ (omume cloning) ma na-anagide oghere ime ihe dị elu, na-eme ka ọ bụrụ nhọrọ ndabara n'ọtụtụ usoro aghụghọ ọgbara ọhụrụ.
Nghọta nka nka
Ọzụzụ na-agbakwụnye mkpọtụ Gaussian iji gosipụta usoro omume ma kuziere netwọkụ (mgbe ọ bụ U-Net ma ọ bụ ihe ntụgharị) ịkọ mkpọtụ ahụ, dabere na nleba anya na nleba anya. N'oge agba ọsọ ọ na-ajụ site na ihe nlele na-enweghị usoro karịa njuaka nke usoro (DDPM/DDIM) iji wepụta ọnọdụ omume. Ịma amụma gbakwunyere nhazigharị 'ịla azụ-horizon' na-enye nkwụsi ike nwa oge ka ị na-emeghachi omume na nleba anya ọhụrụ.
Amụma mgbasa ozi maka njikwa Robot
Amụma mgbasa ozi na-emetụta otu echiche nkwuwa okwu dị n'azụ ndị na-emepụta ihe oyiyi dị ka Stable Diffusion na njikwa robot: kama ịkọ otu ihe na-esote, ọ na-ewepụta usoro dị mkpirikpi nke omume ga-eme n'ọdịnihu site na imezi mkpọtụ. Ọ dị mkpa n'ihi na ọ na-ejikwa ụdị aghụghọ dị iche iche na-adịghị mma, nke dị n'ezie nke ọma karịa ụzọ ochie. Amụma mgbasa ozi maka njikwa Robot bụ nke usoro ọrụ kọmputa-ọhụụ nke na-akọwa ma ọ bụ mepụta mgbasa ozi anya maka nyocha, ọrụ na imepụta ihe. Iji wuo nghọta miri emi, na-emeso amụma mgbasa ozi maka njikwa Robot dị ka ihe nlere anya na-arụ ọrụ, ọ bụghị otu njirimara: kọwapụta nsonaazụ achọrọ, dokwuo anya echiche, kewaa ihe sistemụ nwere ike ime nke ọma na ihe ka na-achọ mkpebi ndị ọkachamara.
Na omume, ndị otu siri ike na-eji amụma mgbasa ozi maka njikwa nguzozi nke Robot na eziokwu arụ ọrụ dị ka ogo data, iche iche ọkụ, na ntinye aha. Ha na-edepụta njirisi ịga nke ọma nke ọma, nwalee megide data ziri ezi yana usoro ọrụ, yana na-atụgharị dabere na usoro ọdịda ahụrụ karịa karịa mmeri otu oge. Nke a bụ ebe nghọta usoro ihe atụ na-atụgharị ghọọ ike na-adịgide adịgide n'ofe ngwaahịa, amụma na arụmọrụ.
Visual AI nwere ike megharịa nyocha, nchọpụta na mkpado ọrụ n'ọtụtụ. N'otu oge ahụ, ikike onyonyo na nkwenye nwere ike bụrụ ihe egwu iwu ma ọ bụrụ na edoghị anya. Ụzọ kachasị na-agbanwe agbanwe bụ ijikọ ọsọ nnwale na ịdọ aka ná ntị ọchịchị: ndị na-anya ụgbọ elu, ijide ihe akaebe, bipụta ndekọ mkpebi, na na-aga n'ihu na-emelite nchekwa dị ka omume nlereanya, atụmanya ndị ọrụ, na ihe iwu chọrọ.
Mmetụta atụmatụ
Visual AI nwere ike megharịa nyocha, nchọpụta na mkpado ọrụ n'ọtụtụ.
Visual AI nwere ike megharịa nyocha, nchọpụta na mkpado ọrụ n'ọtụtụ. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Otu ndị na-emepụta ihe nwere ike imepụta echiche ngwa ngwa site na ngbanwe akwụkwọ ntuziaka ole na ole.
Otu ndị na-emepụta ihe nwere ike imepụta echiche ngwa ngwa site na ngbanwe akwụkwọ ntuziaka ole na ole. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Ọrụ nwere ike iji onyonyo na akara vidiyo siri ike ịhazi.
Ọrụ nwere ike iji onyonyo na akara vidiyo siri ike ịhazi. N'ịkwanye ọkwa dị elu, a na-atụgharị nke a ka ọ bụrụ iwu arụ ọrụ enwere ike ịtụnye, oke nwe, na emume ntụlegharị ugboro ugboro ka ndị otu wee nwee ike ịbawanye ntụkwasị obi kama iwelite enweghị mgbagha.
Mmejuputa n'ezie n'ụwa
Ogwe aka robot na-ebugharị ihe mgbochi T n'ime ebumnuche ebumnuche, akara akara ebe amụma mgbasa pụtara nke ọma karịa ụzọ omume-cloning mbụ.
Robots bimanual na-amụta ọrụ kichin siri ike dị ka ịtụgharị nri ma ọ bụ ikpokọta akụkụ site na ngosi teleoperation mmadụ.
Ịhọrọ ntụtụ ebe ọtụtụ njide dị mma dị yana amụma ahụ na-eme otu kama ịme nkezi.
Modul isi ihe n'ime sistemu omume-asụsụ ọhụụ na-emepụta ngagharị dị elu dị larịị maka aka aghụghọ.
Usoro mmejuputa
Amụma mgbasa ozi maka njikwa Robot na omume
Ogwe aka rọbọt na-ebugharị ngọngọ nke nwere ụdị T n'ime ebumnuche ebumnuche, akara akara ebe amụma mgbasa pụtara nke ọma karịa ụzọ omume-cloning mbụ.
Ogwe aka robot na-ebugharị ngọngọ nke nwere ụdị T n'ime ebumnuche ebumnuche, akara akara ebe Amụma Mgbasa ozi pụtara nke ọma tupu ụzọ omume-cloning Otu dị iche iche na-enweta nsonaazụ kacha mma mgbe ha kọwapụta ọnụ ụzọ dị mma n'ihu, na-edobe ụzọ ịrị elu mmadụ maka ikpe ọnụ, ma soro ma uru nrụpụta yana ụgwọ njehie n'ime oge.
Amụma mgbasa ozi maka njikwa Robot na omume
Robots bimanual na-amụta ọrụ kichin siri ike dị ka ịtụgharị nri ma ọ bụ ikpokọta akụkụ site na ngosi teleoperation mmadụ.
Robots bimanual na-amụta ọrụ kichin siri ike dị ka ịtụgharị nri ma ọ bụ ikpokọta akụkụ site na ngosi teleoperation mmadụ Otu dị iche iche na-enwetakarị nsonaazụ kacha mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-eme ka ụzọ mmadụ si abawanye maka ikpe ikpe, ma soro ma uru nrụpụta yana ụgwọ njehie ka oge na-aga.
Amụma mgbasa ozi maka njikwa Robot na omume
Ịhọrọ ntụtụ ebe ọtụtụ njide ziri ezi dị yana amụma ahụ na-eme otu kama ịgbara nkezi.
Ngwongwo na-ekpo ọkụ na-ekpo ọkụ ebe ọtụtụ njide dị irè dị na amụma ahụ na-enye otu kama iji nkezi otu ìgwè na-enwetakarị nsonaazụ ka mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-eme ka ụzọ mmadụ si abawanye maka ikpe ikpe, ma soro ma uru mmepụta na ụgwọ njehie na oge.
Amụma mgbasa ozi maka njikwa Robot na omume
Action-head modul n'ime sistemu-asụsụ-ọhụụ nke na-emepụta mmegharị ugboro ugboro dị nro maka aka aghụghọ.
Action-head modul n'ime usoro asụsụ-ọhụụ-eme ihe na-emepụta ngagharị dị elu dị elu maka aka dị aghụghọ Otu na-enwetakarị nsonaazụ kacha mma mgbe ha na-akọwapụta ọnụ ụzọ dị mma n'ihu, na-edobe ụzọ ịrị elu nke mmadụ maka ikpe ikpe, ma soro ma uru nrụpụta yana ụgwọ njehie n'oge.
Ihe ize ndụ & okporo ụzọ nche
Ikike onyonyo na nkwenye nwere ike bụrụ ihe egwu dị n'iwu ma ọ bụrụ na edoghị anya.
Ọrụ nlereanya nwere ike ịdịgasị iche n'ofe ọkụ, igwe mmadụ, na gburugburu.
Enwere ike ghara ịhụ ihe dị mma ma ọ bụrụ na enyochaghị oke ntụkwasị obi.
Map mmejuputa
Kọwaa ụkpụrụ nnabata maka nkenke, icheta, na ụgwọ njehie.
Kọwaa ụkpụrụ nnabata maka nkenke, icheta, na ụgwọ njehie. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Nwalee na data dabara na ọnọdụ mmepụta n'ezie.
Nwalee na data dabara na ọnọdụ mmepụta n'ezie. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Tinye nyocha mmadụ maka obere obi ike ma ọ bụ amụma mmetụta dị elu.
Tinye nyocha mmadụ maka obere obi ike ma ọ bụ amụma mmetụta dị elu. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.
Sochie ihe nlere anya wee megharịa ka emechara mgbanwe igwefoto ma ọ bụ dataset.
Sochie ihe nlere anya wee megharịa ka emechara mgbanwe igwefoto ma ọ bụ dataset. Mesoo nzọụkwụ ọ bụla dị ka ọnụ ụzọ akaebe: ọ bụrụ na emezughị ụkpụrụ, kwụsịtụ mbugharị, mechie oghere ahụ, naanị wee gbasaa ojiji.