Cómo usar agentes de IA para preparar escenas 3D para simulación | NVIDIA Technical Blog

Los flujos de trabajo de IA de agentes pueden utilizarse para preparar y validar gemelos digitales para sistemas de IA física. Los agentes pueden inspeccionar escenas 3D, crear datos relevantes para la simulación en OpenUSD, añadir propiedades físicas, renderizar vistas de comprobación previa y validar el resultado frente a los requisitos de preparación para la simulación (SimReady). Este flujo de trabajo sigue ese proceso desde una escena en Blender hasta una entrega de OpenUSD lista para la simulación para NVIDIA Isaac Sim o NVIDIA Isaac Lab.

En la práctica, sin embargo, si está creando agentes para robótica, el flujo de trabajo a menudo puede atascarse. Es tentador culpar de la parte difícil a la política, al modelo o al bucle de entrenamiento, pero el cuello de botella suele ocurrir antes: el robot no tiene un mundo preparado para la simulación en el que entrenar. El trabajo adicional necesario para llevar una escena 3D a ese estado es laborioso, requiere mucho tiempo y, con frecuencia, está fuera del alcance del ingeniero de simulación robótica.

Este artículo describe un flujo de trabajo de agentes para preparar una escena de Blender para la simulación robótica utilizando NVIDIA Omniverse Libraries. Codex, impulsado por OpenAI GPT-6 Astra, coordina la tarea general, interpreta los resultados y guía la iteración. Los subagentes especializados creados con el arnés de agentes Hermes y desplegados a través de NVIDIA NemoClaw utilizan Omniverse Libraries para inspeccionar la escena, crear metadatos de simulación, configurar la física y renderizar vistas visuales de comprobación previa.