A continuaciónSiguiente guía
Modelos de base de robot Skid AI
Empresas
GUÍA de empresas
NVIDIA Cosmos es una familia de "modelos de base mundial" que generan y predicen videos físicamente realistas, creados para enseñar a robots y automóviles autónomos sobre el mundo físico.
Es esencialmente un simulador de video con reconocimiento de la física que puedes solicitar.
Anunciada en CES 2025, NVIDIA Cosmos es una plataforma de modelos generativos de fundamentos mundiales (WFM) destinados a la IA física: robots, vehículos autónomos y sistemas industriales. A diferencia de las herramientas generales de conversión de texto a video centradas en el entretenimiento, Cosmos está entrenado en millones de horas de conducción, robótica y videos de interacción física para producir resultados que respeten la plausibilidad física: permanencia de objetos, movimiento y consistencia 3D. Se entrega en variantes como Cosmos Predict (predicción de video y fotogramas futuros), Cosmos Transfer (que convierte entradas estructuradas como mapas de profundidad o segmentación en video fotorrealista) y Cosmos Reason (un modelo de razonamiento para comprender escenas). Los modelos se publican bajo una licencia abierta para que los desarrolladores puedan ajustarlos con los datos de sus propios sensores para generar escenarios de entrenamiento sintéticos a escala.
Las hojas de ruta de los proveedores influyen en las funciones que su equipo puede desarrollar a continuación.
Los términos comerciales y las opciones de implementación afectan los costos y riesgos a largo plazo.
Los incentivos de las empresas dan forma a los incumplimientos de los productos, la postura de seguridad y la apertura.
Cosmos apunta hacia un futuro en el que la IA física se entrena en gran medida en mundos generados en lugar del costoso y lento mundo real. Espere una integración más estrecha con NVIDIA Omniverse e Isaac para simulación de bucle cerrado, generación de video más controlable y más larga, y adopción como motor de datos sintéticos para desarrolladores de vehículos autónomos y robots humanoides. A medida que mejoran los WFM abiertos, el cuello de botella pasa de recopilar imágenes reales a especificar los raros escenarios de "casos extremos" que desea practicar.
Generación de escenarios de conducción sintéticos (peligros poco comunes, clima, iluminación) para entrenar sistemas de percepción de conducción autónoma.
Predecir fotogramas de vídeo futuros para que un robot pueda anticipar cómo se desarrollará una escena
Conversión de mapas de profundidad o segmentación en videos fotorrealistas para aumento de datos a través de Cosmos Transfer
Capacitación previa de políticas de robots en mundos simulados antes de implementarlas en hardware físico.
Los anuncios de lanzamiento pueden superar la estabilidad en los flujos de trabajo de producción reales.
Los precios de API o los cambios de políticas pueden romper los supuestos de la noche a la mañana.
La dependencia de un único proveedor aumenta los costos de bloqueo y migración.
Evalúe proveedores utilizando sus propias tareas y conjuntos de datos.
Revise los términos legales, de seguridad y de privacidad antes de la integración.
Mantenga un plan alternativo entre modelos o proveedores.
Supervise las notas de la versión para que los cambios en la hoja de ruta no sorprendan a los equipos.
Free newsletter
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
NVIDIA Cosmos es una familia de "modelos de base mundial" que generan y predicen videos físicamente realistas, creados para enseñar a robots y automóviles autónomos sobre el mundo físico. Es esencialmente un simulador de video con reconocimiento de la física que puedes solicitar.
Cosmos es una plataforma de modelos básicos mundiales para la IA física: genera videos con reconocimiento de la física para entrenar robots y vehículos autónomos.
El tokenizador comprime vídeo de alta resolución en un pequeño conjunto de tokens, lo que hace que los modelos sean más baratos de entrenar y ejecutar, preservando al mismo tiempo la estructura.
Cosmos Predict maneja video y predicción de fotogramas futuros; Transfer convierte entradas estructuradas en vídeo y Reason se encarga de la comprensión de la escena.
Generar casos extremos sintéticos es mucho más barato y seguro que recolectarlos en carreteras reales, lo que acelera la capacitación.
NVIDIA lanzó los modelos Cosmos bajo una licencia abierta para que los desarrolladores puedan adaptarlos a sus propios datos.
sigue aprendiendo
Más guías seleccionadas para este tema.
A continuaciónSiguiente guía
Modelos de base de robot Skid AI
Empresas