Thrixel für Physical AI

Simulationsbereite Welten für das Roboterlernen

Aus realen Referenzdaten und Spezifikationen entstehen strukturierte 3D-Assets, vollständige Umgebungen und Simulationsdaten für Physical AI.

Roboterinteraktion in einer mit Thrixel generierten Küche. Die Demonstration läuft mit dreifacher Geschwindigkeit.

3D-Erstellung für Physical AI

Bestehende Umgebungen rekonstruieren oder strukturierte Szenen aus einer Spezifikation generieren.

Aus realen Referenzdaten

Rekonstruktion digitaler Zwillinge

Aus Fotos und Videos entstehen 3D-Assets und Umgebungen mit mehreren Objekten, Dreiecksnetzen, PBR-Materialien und separaten semantischen Teilen. Die USDA-Ausgabe enthält die Struktur und Physik für Simulationsworkflows.

Aus einer Szenenspezifikation

Simulationsdaten in großem Umfang

Vollständige strukturierte Szenen mit simulationsbereiten Assets und zugehörigen Aufgabendefinitionen generieren. Assets und Anordnungen anhand realer Verteilungen variieren und Robotertrajektorien für Imitationslernen erzeugen.

Vom Prompt zur vollständigen SimReady-Szene

Eine Umgebung mit beweglichen Objekten, Physikmaterialien und Kollisionsgeometrie für Interaktionen in der Simulation. Was ist SimReady 3D?

Eine vollständige Küchenumgebung mit Möbeln, Geräten und beweglichen Objekten. Der Kameraflug läuft mit doppelter Geschwindigkeit.
  • Physikalische Gelenke

    Gelenkverbindungen bilden ab, wie sich Türen, Deckel und andere Komponenten bewegen und miteinander interagieren.

  • Physikmaterialien

    Physikalische Oberflächeneigenschaften ermöglichen Kontakt und Bewegung in der Simulation.

  • Gültige Collider

    Kollisionsgeometrie verleiht Objekten eine physikalische Präsenz für Manipulation und Interaktion mit der Umgebung.

Semantisches 3D für Roboterinteraktionen

Assets enthalten Informationen über ihre Komponenten, Kontaktflächen und Greifpositionen.

  • Semantische Interpretation von Teilen

    Separate Meshes kennzeichnen funktional relevante Komponenten. So können Griff, Tür und Schrankkorpus jeweils in eine Aufgabe einbezogen werden.

  • Definierte Greifpunkte

    Thrixel definiert Greifpositionen für die Robotermanipulation und prüft Greifen und Anheben in der Simulation.

  • Präzise Kollisionsgeometrie

    Mesh-Collider und USD-Physics-Schemas beschreiben die Kontakte und Randbedingungen bei Interaktionen.

Vom Referenzbild zum validierten Asset

Der Rekonstruktionsworkflow verbindet Erscheinungsbild, Geometrie und physikalisches Verhalten.

  1. 01

    Referenzmaterial

    Bilder eines einzelnen Objekts oder einer vollständigen Szene dienen als Ausgangspunkt. Referenzmaterial und Abmessungen bestimmen die Rekonstruktion.

  2. 02

    3D-Rekonstruktion

    Geometrie, PBR-Texturen, separate Meshes für semantische Teile und simulationsbereite Physik in einem strukturierten Asset erstellen.

  3. 03

    Validierung in Isaac Sim

    Das Asset in der Simulation testen und kalibrieren. Dabei wird sein Verhalten bei Kontakt, Gelenkbewegungen und Manipulation geprüft.

Prüfungen in der Simulation

  • Zur Ruhe kommen
  • Fallenlassen
  • Gleiten
  • Gelenkbewegung
  • Greifen und Anheben

Simulationsdaten für das Roboterlernen

Asset- und Szenenvarianten

Prozedurale Variation erweitert eine Umgebung anhand realer Verteilungen zu mehreren Konfigurationen. Die strukturierten Szenen behalten die für die Simulation benötigten Assets, Physikeigenschaften und Aufgabendefinitionen bei.

Trajektorien für Imitationslernen

Robotertrajektorien erfassen Interaktionen mit der Umgebung. Semantische Teile, definierte Greifpunkte und validierte Physik unterstützen die Manipulationsaufgaben, aus denen Imitationsdaten entstehen.

Ein Physical-AI-Projekt besprechen

Referenzmaterial, Zielumgebung und Roboteraufgaben bilden die Grundlage für ein Gespräch mit dem Team über Rekonstruktion, Szenengenerierung und Anforderungen an Simulationsdaten.

Thrixel kontaktieren