Ziva für Isaac Sim

KI für Isaac Sim im Simulator

Ziva ist ein KI-Agent für NVIDIA Isaac Sim. Er liest die OpenUSD-Stage, schreibt Python für eure festgelegte API-Version, verbindet ROS-2-Graphen und Replicator-Pipelines und prüft das Ergebnis in der Simulation.

Pilot mit definiertem Umfang. Abläufe, Bereitstellung und Evaluation werden mit eurem Team bestätigt.

Mit unserem Team sprechen

Für Isaac-Sim-Teams

KI-Entwicklungsagent
Versteht OpenUSD und Isaac Lab
Ohne Oberfläche auf eurem Cluster
Studio-Evaluation und Sicherheitsprüfung
Bereitstellung gemeinsam festlegen

Im Simulator

Ein Agent, der OpenUSD versteht

Die Python-Datei enthält nur wenig vom Projekt. Der Roboter ist eine Artikulation auf einer USD-Stage, Sensoren sind Prim-Graphen und ROS-2-Publisher OmniGraph-Knoten. Fehler betreffen oft Gelenkantriebe. Ein Textassistent muss all das erraten.

Liest die USD-Stage

Durchsucht die zusammengesetzte Stage, findet Prims nach Pfad, Typ oder API-Schema und liest Attribute und Transformationen direkt.

Bearbeitet Prims, Layer und Verweise

Erstellt und verschiebt Prims und schreibt Attribute in den gewünschten Layer. Verweise, Payloads und Varianten bleiben erhalten.

Python für eure festgelegte Version

Isaac-Sim-APIs wurden zwischen Releases umbenannt. Der Agent arbeitet mit eurer Version und prüft, ob das Skript tatsächlich läuft.

Importiert und konfiguriert Roboter

Konvertiert URDF-, MJCF- und CAD-Importe zu Artikulationen mit passenden Gelenksteifigkeiten, Dämpfung, Kollisionen, Masseneigenschaften und Selbstkollisionseinstellungen.

Verbindet ROS-2-Bridges

Action-Graph-Knoten für Publisher, Subscriber, TF-Bäume und Simulationszeit passen zu den Nachrichtentypen eures Roboter-Stacks.

Erstellt Replicator-Pipelines

Generiert synthetische Daten mit Randomizern, Annotatoren und Writern für Bounding Boxes, Segmentierung, Tiefe und Posen in eurem bestehenden Datenformat.

Erstellt Isaac-Lab-Umgebungen

Schreibt Beobachtungs-, Belohnungs- und Abbruchbedingungen, Aktionsräume und Curricula sowie Konfiguration für managerbasierte oder direkte RL-Umgebungen.

Liest das Kit-Protokoll

Python-Fehler, Ladefehler von Erweiterungen, PhysX-Warnungen und USD-Kompositionsfehler gelangen direkt in den Kontext.

Simuliert und beobachtet

Startet Szenen ohne Oberfläche, führt Physikschritte aus und erstellt Screenshots von Viewport und Kamerasensoren, um Fehler zu erkennen.

Domain Randomization für Sim-to-Real

Variiert Licht, Texturen, Materialien, Physik und Sensorrauschen innerhalb der Bereiche eurer Hardware, damit Policies über die Standardszene hinaus funktionieren.

Sensoren passend zum Roboter

Platziert und kalibriert RTX-Lidar, Stereo-/Fisheye-Kameras, IMUs und Kontaktsensoren anhand realer extrinsischer Parameter.

Erstellt digitale Zwillinge

Baut Lager-, Fabrik- und Laborszenen aus SimReady-Assets mit Förderbändern, Regalen und Vorrichtungen nach eurem Grundriss.

So funktioniert ein Auftrag

Gemeinsam festgelegt

Ziva ist für Godot verfügbar und für Unity in der Beta. Isaac-Sim-Unterstützung wird als Auftrag passend zu Isaac-Version, ROS-2-Distribution und Trainingscluster umgesetzt.

Euren Stack festlegen

Isaac-Sim-/Isaac-Lab-Versionen, ROS 2, Roboter, Trainingsort und Vertragsvorgaben bestimmen den Umfang.

Bestehende Funktionen nutzen

Agent, Integration und Simulationssteuerung laufen bereits in zwei Engines. Für Isaac Sim ergänzen wir die Werkzeuge eures Programms.

Eure Werkzeuge anbinden

Nucleus, Asset-Bibliothek, Experiment-Tracker, Datenspeicher und interne CLIs werden über MCP nutzbar.

Dort bereitstellen, wo es erlaubt ist

Anbieter-Cloud, eigene VPC oder lokale Hardware ohne ausgehende Verbindungen. Dedizierte Inferenzkapazität, falls eure Nutzerzahl sie erfordert.

Robotik-Pipeline

Passt in eure Trainingspipeline

Robotik umfasst Nucleus, GPU-Cluster, Jobs ohne Oberfläche, große Datensätze und Policies für echte Hardware. Der Agent berücksichtigt diese Bedingungen.

Ohne Oberfläche auf eurem Cluster

Nutze Batch-Jobs für Variationsbereiche, Datengenerierung und Regressionsszenen. Der Agent öffnet Änderungen mit Ergebnissen.

Nucleus und eure Asset-Bibliothek

Nutzt bereits veröffentlichte Team-Assets statt neuer Kopien der Beispielbibliothek in jeder Szene.

Interne Werkzeuge als Agentenwerkzeuge

MCP stellt Experiment-Tracker, Datenspeicher, Flottentelemetrie und interne CLIs bereit.

Checkpoints und Undo

Jeder Zug erhält einen Checkpoint im projektbezogenen Verlauf außerhalb der Versionskontrolle. Experimente lassen sich ohne Team-Revert zurücksetzen.

Eure Isaac-Konventionen

Erweiterungsstruktur, Namen und Review-Regeln richten den Code am bestehenden Repository aus.

Ziva als MCP-Server

Claude Code, Cursor und eigene Agenten nutzen Simulatorwerkzeuge über Ziva außerhalb der Oberfläche.

Vergleich mit allgemeinen KI-Programmierassistenten

Copilot kann deine Stage nicht öffnen

Copilot, Cursor und Browserchats schreiben Python, können aber keine Prims in der zusammengesetzten Stage auflösen, falsche Artikulationswurzeln erkennen, Kit-Protokolle lesen oder die Simulation ausführen.

Funktion	Copilot · Cursor · ChatGPT	Ziva für Isaac Sim
Schreibt Python aus eurer Codebasis	hier besonders stark	zusätzlich Stage-Kontext
Nutzt eure festgelegte Isaac-Sim-API	schreibt alte Namensräume	eure Version, dann Ausführung
Liest Prims und Attribute	sieht höchstens einen USD-Layer	über die USD-API
Konfiguriert Artikulationen und Gelenkantriebe	keine Physikbeobachtung	misst PhysX-Schritte
Liest Kit-Protokoll und PhysX-Warnungen	du kopierst den Stacktrace	direkt beim Fehler
Prüft Korrekturen in der Szene	liest Code und schätzt	Ausführung ohne Oberfläche, Viewport-Aufnahme
Bereitstellungsanforderungen	nur Anbieter-Cloud	Mit deinem Team festgelegt

Ziva ist für Godot verfügbar und für Unity in der Beta. Isaac-Sim-Funktionen werden pro Kunde vor dem Enterprise-Auftrag festgelegt. Agent, Integration und Simulationssteuerung laufen bereits in zwei Engines.

Sicherheit und Infrastruktur

Betrieb nach euren Isaac-Sim-Anforderungen

Kundenstandortdaten, vertrauliche Roboterentwürfe und Policies bestimmen, wohin Code und Datensätze gelangen dürfen. Wir klären konkrete Bereitstellungsoptionen.

Bereitstellungsanforderungen

Besprecht, wo Agent und Modellinferenz laufen müssen, einschließlich Netzwerkbeschränkungen. Optionen und Verfügbarkeit werden im Auftragsumfang bestätigt.

Modelle und Daten

Prüft Modellanbieter, Datenverarbeitungsbedingungen und ob lokale Inferenz eure Anforderungen erfüllt. Richtlinien hängen von Anbieter und Diensten ab.

Sicherheitsprüfung

Teilt Sicherheitsfragebogen und erforderliche Kontrollen. Wir bestätigen verfügbare Maßnahmen und Lücken vor der Evaluation.

Einführung im Team

Zugriff, Nutzung, Support und Geschäftsbedingungen werden im Studioauftrag vereinbart.

Nachweise lesen

Was Ziva in 3D-Engines bereits kann

Isaac-Sim-Unterstützung wird gemeinsam festgelegt. Bewertet uns anhand der heute sichtbaren Arbeit in anderen Engines.

Ziva für Godot

Das verfügbare Produkt liest Szenenbaum, bearbeitet Knoten, schreibt Code und untersucht das laufende Spiel.

Ziva für Unity

Die zweite Engine in der Beta: Hierarchie, Prefabs, C#, Console und Test Framework direkt im Editor.

Der Agent, der Builds spielt und Fehler meldet

Der Prüfablauf startet den Build, sendet echte Eingaben und liefert gemessene Ergebnisse.

Claude Code in Unity an einem echten Spiel getestet

Vier Modelle, ein Build: Werkzeugaufrufe, Zeit, Kosten und Bewertung. So prüfen wir Modelle vor dem Einsatz.

Antworten zu KI für Isaac Sim

Gibt es KI für NVIDIA Isaac Sim?

Ziva bringt einen KI-Agenten über Enterprise in Isaac-Sim-Teams. Agent, Integration und Simulationssteuerung laufen in Godot und Unity-Beta. USD-Stage, Python, Roboterimporte, ROS 2, Replicator und Isaac Lab werden gemeinsam festgelegt.

Warum haben allgemeine KI-Assistenten Probleme mit Isaac Sim?

Sie sehen weder Prims, Attribute noch Artikulationswurzeln auf der OpenUSD-Stage. Zudem wurden API-Namensräume zwischen Versionen umbenannt; Modelle schreiben häufig Code, der in eurer Version nicht importiert werden kann.

Hilft KI bei Reinforcement Learning in Isaac Lab?

Ja, bei der technischen Umsetzung. Der Agent erstellt Beobachtungen, Belohnungs- und Abbruchbedingungen, Aktionsräume und Curricula nach eurer Konfiguration, richtet Randomisierung ein und prüft die Simulation vor dem Clusterlauf. Die Entscheidung über die Belohnung bleibt bei euch.

Kann der Agent synthetische Trainingsdaten erzeugen?

Ja. Er erstellt Replicator-Pipelines mit Randomizern, Annotatoren und Writern, passend zu euren Bounding Boxes, Segmentierung, Tiefe oder Posen und Datenformaten. Die Generierung kann ohne Oberfläche auf eurem Cluster laufen.

Verlassen Simulationscode und Roboterdaten unser Netzwerk?

Bei Cloud-Modellen werden benötigter Code und Gesprächskontext an den gewählten Anbieter gesendet. Ziva trainiert niemals mit eurem Code. Lokale Inferenz und Netzwerkoptionen bestätigen wir für eure Evaluation. Datenschutzerklärung zu Anbietern und Diensten lesen.

Welche Isaac-Sim-Versionen werden unterstützt?

Der Umfang wird pro Auftrag festgelegt. Insbesondere API-Änderungen zwischen 4.x und 5.x müssen passen. Nennt Isaac-Sim-, Isaac-Lab-Version und ROS-2-Distribution; wir richten uns danach.

Wie erhalten wir Ziva für Isaac Sim?

Kontaktiert Enterprise mit Version, Teamgröße, Robotern und zulässigen Ausführungsorten. Der Plan umfasst Simulatoragent, Jobs ohne Oberfläche und eigenen Betrieb oder dedizierte Inferenzhardware.

Bringe Ziva in dein Isaac-Sim-Team

Nennt Version, Teamgröße, Versionskontrolle und zulässige Ausführungsorte. Wir erstellen einen passenden Plan.

Über Isaac Sim sprechen