NVIDIA Awọn awoṣe Cosmos World Foundation
NVIDIA Cosmos jẹ idile ti 'awọn awoṣe ipilẹ agbaye' ti o ṣe ipilẹṣẹ ati asọtẹlẹ fidio ojulowo ti ara, ti a ṣe lati kọ awọn roboti ati awọn ọkọ ayọkẹlẹ awakọ ti ara ẹni nipa agbaye ti ara.
Akopọ
It is essentially a physics-aware video simulator you can prompt.
Jin Dive
Ti kede ni CES 2025, NVIDIA Cosmos jẹ pẹpẹ ti awọn awoṣe ipilẹ agbaye ti ipilẹṣẹ (WFMs) ti a pinnu si AI ti ara - awọn roboti, awọn ọkọ ayọkẹlẹ adase, ati awọn eto ile-iṣẹ. Ko dabi awọn irinṣẹ ọrọ-si-fidio gbogbogbo ti dojukọ lori ere idaraya, Cosmos ti ni ikẹkọ lori awọn miliọnu awọn wakati awakọ, awọn roboti, ati fidio ibaraenisepo ti ara lati ṣe agbejade awọn abajade ti o bọwọ fun ipolowo ti ara: iduroṣinṣin ohun, išipopada, ati aitasera 3D. O firanṣẹ ni awọn iyatọ bii Cosmos Predict (fireemu-ọjọ iwaju ati asọtẹlẹ fidio), Gbigbe Cosmos (yiyipada awọn igbewọle eleto bii ijinle tabi awọn maapu ipin sinu fidio fọto gidi), ati Idi Cosmos (awoṣe ero fun oye awọn iwoye). Awọn awoṣe ti wa ni idasilẹ labẹ iwe-aṣẹ ṣiṣi ki awọn olupilẹṣẹ le ṣe itanran-tunse wọn lori data sensọ tiwọn lati ṣe agbekalẹ awọn oju iṣẹlẹ ikẹkọ sintetiki ni iwọn.
Imọ-imọ-ẹrọ
Cosmos ṣapọpọ tokenizer fidio kan ti o rọ awọn fireemu ipinnu giga sinu awọn ami iwapọ pẹlu kaakiri mejeeji ati awọn ọna ayaworan ile-itumọ aṣetunṣe ti o sọ asọtẹlẹ awọn ami-ami ti o ni ilodi si lori ọrọ, awọn aworan, tabi awọn fireemu ṣaaju. Eto iṣọṣọ ti a ṣe sinu ṣe asẹ akoonu ti ko ni aabo. Tokenizer jẹ lefa ṣiṣe ṣiṣe bọtini: nipa aṣoju fidio bi ipilẹ kekere ti awọn ami, awọn awoṣe le ṣe ikẹkọ ati ṣiṣe diẹ sii ni olowo poku lakoko ti o tọju aye ati igbekalẹ akoko ti o nilo fun otitọ ti ara.
Ipa Ilana
Ilana olutaja
Awọn maapu opopona olutaja ni ipa kini awọn ẹya ti ẹgbẹ rẹ le kọ ni atẹle.
Iye owo ati isuna
Awọn ofin iṣowo ati awọn aṣayan imuṣiṣẹ ni ipa lori idiyele igba pipẹ ati eewu.
Ewu ati ailewu
Awọn imoriya ile-iṣẹ ṣe apẹrẹ awọn abawọn ọja, iduro ailewu, ati ṣiṣi.
Ojo iwaju ti NVIDIA Cosmos World Foundation Models
Cosmos tọka si ọjọ iwaju nibiti AI ti ara ti ni ikẹkọ ni pataki ni awọn agbaye ti ipilẹṣẹ dipo idiyele ti o lọra, gidi gidi. Reti isọpọ titọ pẹlu NVIDIA Omniverse ati Isaaki fun simulation pipade-lupu, iṣakoso diẹ sii ati iran fidio to gun, ati isọdọmọ bi ẹrọ data sintetiki fun ọkọ ayọkẹlẹ adase ati awọn olupilẹṣẹ roboti humanoid-robot. Bi awọn WFM ti ṣiṣi ti ilọsiwaju, igo naa yipada lati ikojọpọ aworan gidi si sisọ awọn oju iṣẹlẹ 'ọran eti' toje ti o fẹ ṣe adaṣe.
Real-World imuse
Ṣiṣẹda awọn oju iṣẹlẹ awakọ sintetiki (awọn eewu to ṣọwọn, oju ojo, ina) lati kọ awọn eto iwoye awakọ ti ara ẹni
Asọtẹlẹ awọn fireemu fidio ojo iwaju ki robot le fokansi bi iṣẹlẹ kan yoo ṣe ṣii
Yiyipada ijinle tabi awọn maapu ipin sinu fidio fọtoyiya fun imudara data nipasẹ Gbigbe Cosmos
Awọn eto imulo robot ikẹkọ ṣaaju ni awọn aye afarawe ṣaaju fifiranṣẹ si ohun elo ti ara
Awọn ewu & Awọn ọna iṣọ
Awọn ikede ifilọlẹ le ju iduroṣinṣin lọ ni awọn iṣan-iṣẹ iṣelọpọ gidi.
Ifowoleri API tabi awọn iyipada eto imulo le fọ awọn arosinu ni alẹ.
Igbẹkẹle olutaja ẹyọkan ṣe alekun titiipa-inu ati awọn idiyele ijira.
Ilana Ilana imuse
Ṣe ayẹwo awọn olupese nipa lilo awọn iṣẹ ṣiṣe tirẹ ati awọn ipilẹ data.
Ṣe atunyẹwo asiri, aabo, ati awọn ofin ofin ṣaaju iṣọpọ.
Ṣetọju eto ipadabọ kọja awọn awoṣe tabi awọn olutaja.
Bojuto awọn akọsilẹ itusilẹ nitoribẹẹ awọn iyipada maapu oju-ọna ma ṣe iyalẹnu awọn ẹgbẹ.
Tesiwaju Ṣiṣawari
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the NVIDIA Cosmos World Foundation Models quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Itọsọna atẹle
Awọn awoṣe Skild AI Robot Foundation
Awọn ibeere ti a beere nigbagbogbo
What is NVIDIA Cosmos World Foundation Models?
NVIDIA Cosmos jẹ idile ti 'awọn awoṣe ipilẹ agbaye' ti o ṣe ipilẹṣẹ ati asọtẹlẹ fidio ojulowo ti ara, ti a ṣe lati kọ awọn roboti ati awọn ọkọ ayọkẹlẹ awakọ ti ara ẹni nipa agbaye ti ara. O jẹ pataki simulator fidio ti o mọ fisiksi ti o le tọ.
Kini idi akọkọ ti NVIDIA Cosmos?
Cosmos jẹ pẹpẹ ti awọn awoṣe ipilẹ agbaye fun AI ti ara - ṣiṣẹda fidio ti o mọ fisiksi lati kọ awọn roboti ati awọn ọkọ ayọkẹlẹ adase.
Kini tokenizer fidio ni Cosmos ṣe?
Awọn tokenizer compresses ga-o ga fidio sinu kan kekere ṣeto ti àmi, ṣiṣe awọn awoṣe din owo lati irin ati ki o ṣiṣẹ nigba ti toju be.
Iyatọ Cosmos wo ni idojukọ lori asọtẹlẹ awọn fireemu fidio iwaju?
Asọtẹlẹ Cosmos n kapa fidio ati asọtẹlẹ-fireemu iwaju; Gbigbe ṣe iyipada awọn igbewọle eleto si fidio, ati Idi mu oye ipo.
Kini idi ti awọn awoṣe ipilẹ agbaye ṣe pataki fun ikẹkọ adaṣe-ọkọ ayọkẹlẹ?
Ṣiṣẹda awọn ọran eti sintetiki jẹ din owo pupọ ati ailewu ju gbigba wọn ni awọn opopona gidi, ikẹkọ isare.
Bawo ni Cosmos ṣe tu silẹ si awọn olupilẹṣẹ?
NVIDIA ṣe idasilẹ awọn awoṣe Cosmos labẹ iwe-aṣẹ ṣiṣi ki awọn olupilẹṣẹ le ṣe deede wọn si data tiwọn.