Simülasyon için 3D Sahneleri Hazırlamada AI Agent Kullanımı | NVIDIA Teknik Blog

Agentic AI iş akışları, fiziksel YZ sistemleri için dijital ikizleri hazırlamak ve doğrulamak amacıyla kullanılabilir. Ajanlar 3D sahneleri inceleyebilir, OpenUSD içinde simülasyonla ilgili veriler oluşturabilir, fizik özellikleri ekleyebilir, uçuş öncesi (preflight) görünümleri işleyebilir ve sonucu simülasyona hazır (SimReady) gereksinimlerine karşı doğrulayabilir. Bu iş akışı, Blender'daki bir sahneden NVIDIA Isaac Sim veya NVIDIA Isaac Lab için simülasyona hazır bir OpenUSD teslimine kadar olan süreci takip eder.

Ancak pratikte, robotik için ajanlar oluşturuyorsanız, iş akışı genellikle tıkanabilir. Zorlu kısmı politikaya, modele veya eğitim döngüsüne bağlamak cazip gelse de, darboğaz genellikle daha önce gerçekleşir: Robotun içinde eğitim alabileceği simülasyona hazır bir dünyası yoktur. Bir 3D sahneyi bu duruma getirmek için gereken ek çalışma zahmetli, zaman alıcıdır ve sıklıkla robotik simülasyon mühendisinin kapsamı dışındadır.

Bu yazı, NVIDIA Omniverse Kitaplıkları'nı kullanarak robotik simülasyonu için bir Blender sahnesi hazırlamaya yönelik bir ajan iş akışını ele almaktadır. OpenAI GPT-6 Astra tarafından desteklenen Codex, genel görevi koordine eder, sonuçları yorumlar ve yinelemeye rehberlik eder. Hermes ajan donanımı ile oluşturulan ve NVIDIA NemoClaw aracılığıyla konuşlandırılan özelleşmiş alt ajanlar, sahneyi incelemek, simülasyon meta verileri oluşturmak, fiziği yapılandırmak ve görsel uçuş öncesi görünümleri işlemek için Omniverse Kitaplıkları'nı kullanır.