NVIDIA muestra a desarrolladores que usan agentes de IA para crear simulaciones en Omniverse
NVIDIA detalló una serie de proyectos de desarrolladores que combinan agentes de IA de vanguardia con las bibliotecas de Omniverse para crear y probar simulaciones basadas en física.
Respuesta rápida
¿Qué anunció NVIDIA sobre los desarrolladores que usan agentes de IA con las herramientas de simulación de Omniverse?
NVIDIA publicó una entrada de blog en la que describe a desarrolladores de sus distintos equipos que utilizaron agentes de IA de vanguardia, entre ellos Astra y Claude Fable 5, junto con las bibliotecas de NVIDIA Omniverse, para crear aplicaciones de simulación que abarcan desde la automatización de almacenes y las pruebas de turbinas de gas hasta el entrenamiento de robots, los flujos de trabajo de conducción autónoma y un modelo de una estación espacial visualizable desde el navegador.
Claves
- NVIDIA describió un conjunto de proyectos de desarrolladores, internos y del ecosistema, que combinan agentes de IA de vanguardia con las bibliotecas de NVIDIA Omniverse para crear aplicaciones de simulación.
- Los proyectos incluyen la reconstrucción de un edificio de almacén a partir de escaneos del lugar, una herramienta de análisis de hipótesis para turbinas de gas, una escena de cocina SimReady con más de 2.000 activos disponibles en la biblioteca, y una simulación de almacén que, según NVIDIA, mantuvo 30 fotogramas por segundo con 80 cintas transportadoras, 40 brazos y 800 cajas.
- NVIDIA señala que los desarrolladores también emplearon agentes de IA para probar el tendido flexible de cables en el ensamblaje de equipos electrónicos, convertir el modelo CAD de un robot en un activo SimReady y crear un simulador humanoide de almacén con vistas en primera y tercera persona.
- Un proyecto de conducción autónoma llamado Zero to Alpamayo creó una simulación reutilizable de una calle de San Francisco, y un proyecto independiente de validación de sensores empleó a los agentes Astra y Claude Fable 5 para comparar datos de cámara y lidar simulados y grabados con el fin de mejorar los gemelos digitales.
- En un proyecto llamado Robo Olympics, NVIDIA indica que un humanoide Unitree G1 simulado superó un único obstáculo en 64 de 100 pruebas de simulación, mientras los desarrolladores utilizaban los resultados para ajustar los tiempos y el control del robot.
NVIDIA detalla proyectos de desarrolladores que combinan agentes de IA con Omniverse
NVIDIA publicó una entrada de blog en la que expone una serie de proyectos en los que desarrolladores de sus distintos equipos emplearon agentes de IA de vanguardia, entre ellos Astra y Claude Fable 5, junto con las bibliotecas de NVIDIA Omniverse, para crear y probar simulaciones basadas en física. Según NVIDIA, los desarrolladores dirigen a los agentes mediante instrucciones en lenguaje natural, revisan los resultados y guían los ajustes posteriores, mientras que las bibliotecas de Omniverse aportan física, renderizado y simulación de sensores acelerados por GPU.
Ejemplos de almacenes e industria
NVIDIA afirma que David Wehr, de su equipo de tecnología de simulación, utilizó Astra para reconstruir un edificio a partir de fotografías panorámicas y mediciones de nubes de puntos, generando un modelo editable y listo para simulación con el que evaluar la distribución de un almacén antes de realizar cambios físicos. En otro proyecto, Pradeep Kaushik, del equipo de relaciones con desarrolladores de Omniverse, dirigió a Astra en la creación de una aplicación de análisis de hipótesis en torno a una turbina de gas y un generador simulados, empleando herramientas como Cantera y SciPy, con seis procedimientos de prueba que cubrían escenarios como cambios de carga, una válvula de combustible atascada y un error en el sensor de escape.
NVIDIA también describe una simulación de almacén creada por el ingeniero principal Bhavik Sanganee para probar el rendimiento a gran escala. La empresa asegura que la simulación mantuvo 30 fotogramas por segundo a resolución full HD durante una prueba de dos minutos con 80 cintas transportadoras, 40 brazos y 800 cajas, completando 640 colocaciones exitosas de cajas, y que al duplicar de nuevo la escena el rendimiento volvió a caer, algo que las pruebas atribuyeron al proceso de física y control de los robots.
Proyectos de robótica y creación de activos
Según NVIDIA, Paul Kind, de su equipo de documentación de Omniverse, utilizó un agente de IA para componer una escena de cocina a partir de la SimReady Central Library, que la empresa indica que ofrece más de 2.000 activos USD listos para simulación, combinando 180 colocaciones procedentes de 63 activos únicos de la biblioteca con 18 piezas de geometría personalizadas.
Otros proyectos descritos por NVIDIA incluyen una simulación robótica para el tendido flexible de cables en el ensamblaje de equipos electrónicos, desarrollada por el gerente técnico de marketing de robótica Oyindamola Omotuyi con Isaac Lab y la física de Newton; la conversión de un modelo CAD del robot YuMi de ABB Robotics en un activo SimReady, que según NVIDIA completó cuatro ciclos de recogida y colocación de cubos en pruebas simuladas; y un simulador humanoide de almacén con vistas en primera y tercera persona creado por el gerente de producto de Omniverse Frank DeLise.
Conducción autónoma y validación de sensores
NVIDIA afirma que Doyub Kim construyó Zero to Alpamayo, un entorno de simulación reutilizable basado en Market Street, en San Francisco, para probar cómo los cambios en la escena, los sensores y el modelo de conducción afectan a los resultados de la simulación de vehículos autónomos, y realizó un experimento aparte variando las condiciones climáticas y de iluminación. En otro proyecto, Ashley Reid dirigió a los agentes Astra y Claude Fable 5 durante aproximadamente tres días para comparar las salidas simuladas de cámara y lidar con datos grabados, creando desde cero dos gemelos digitales y mejorando otros dos ya existentes a partir de las discrepancias detectadas.
NVIDIA también describe un proyecto llamado Robo Olympics, liderado por Tae Kim, en el que un humanoide Unitree G1 simulado superó un único obstáculo en 64 de 100 pruebas, además de una prueba de desensamblaje robótico sobre la suspensión de un automóvil y un modelo de la Estación Espacial Internacional creado para visualizarse en el navegador utilizando activos de la NASA y herramientas de renderizado de Omniverse.
Fuente: NVIDIA Blog, "Into the Omniverse: How Developers Turn Ideas Into Simulations With Frontier AI Agents", publicado el 29 de octubre de 2026.
Preguntas frecuentes
- ¿Qué herramientas utilizaron los desarrolladores en estos proyectos?
- NVIDIA indica que los desarrolladores emplearon agentes de IA de vanguardia como Astra y Claude Fable 5 junto con las bibliotecas de NVIDIA Omniverse, entre ellas ovrtx para renderizado, ovstage para actualizaciones de escena, ovphysx para física y ovui para interfaces, además de OpenUSD para almacenar los modelos.
- ¿Qué es la SimReady Central Library?
- NVIDIA señala que la SimReady Central Library, anunciada en GTC Berlín, ofrece a los desarrolladores acceso a más de 2.000 activos USD listos para simulación procedentes de fabricantes de equipos y proveedores de activos, destinados a flujos de trabajo de simulación robótica y gemelos digitales de fábricas de IA.
- ¿Qué resultados arrojó la prueba de estrés del almacén?
- NVIDIA afirma que una simulación de almacén con 80 cintas transportadoras, 40 brazos y 800 cajas mantuvo 30 fotogramas por segundo a resolución full HD durante una prueba de dos minutos, con los brazos completando 640 colocaciones exitosas de cajas, antes de que el rendimiento volviera a caer al duplicar aún más la escena.
- ¿Qué se probó en el proyecto de conducción autónoma?
- NVIDIA indica que un gerente de su equipo de tecnología de simulación dirigió a Astra en la creación de Zero to Alpamayo, un entorno de simulación reutilizable basado en Market Street, en San Francisco, para probar cómo los cambios en las escenas, los sensores o los modelos de conducción afectan a los resultados de la simulación de vehículos autónomos.