Thrixel til Physical AI

Simuleringsklare verdener til robotlæring

Gør input og specifikationer fra den virkelige verden til strukturerede 3D-aktiver, komplette miljøer og simuleringsdata til fysisk AI.

Robotinteraktion i et Thrixel-genereret køkken. Demonstration vist ved 3× hastighed.

3D-skabelse til Physical AI

Rekonstruer et eksisterende miljø eller generer en struktureret scene ud fra en specifikation.

Fra input fra den virkelige verden

Digital tvillinge-rekonstruktion

Fotos og video bliver 3D-aktiver og miljøer med flere objekter med trekantsmasker, PBR-materialer og separate semantiske dele. USDA output bærer den struktur og fysik, der er nødvendig for simuleringsarbejdsgange.

Fra en scenespecifikation

Simuleringsdata i skala

Generer fuldt strukturerede scener med simuleringsklare aktiver og tilsvarende opgavedefinitioner. Varier aktiver og layout ved hjælp af distributioner i den virkelige verden, og skab robotbaner til efterligningslæring.

Fra prompt til komplet SimReady-scene

Et miljø med artikulerede objekter, fysikmaterialer og kollisionsgeometri, klar til interaktion i simulering. Hvad er SimReady 3D?

Et komplet køkkenmiljø med møbler, hvidevarer og leddelte genstande. Gennemløb vist ved 2× hastighed.
  • Fysiske led

    Leddele modellerer, hvordan døre, låg og andre komponenter bevæger sig og interagerer.

  • Fysiske materialer

    Fysiske overfladeegenskaber understøtter kontakt og bevægelse i simuleringen.

  • Gyldige kollidere

    Kollisionsgeometri giver objekter en fysisk tilstedeværelse til manipulation og miljøinteraktion.

Semantisk 3D til robotinteraktion

Aktiver indeholder oplysninger om deres komponenter, kontaktflader og grebsplaceringer.

  • Semantisk del ræsonnement

    Separate masker identificerer meningsfulde komponenter, så et håndtag, en dør og et kabinet kan hver især deltage i en opgave.

  • Definerede robotgribepunkter

    Thrixel definerer robotgribesteder til robotmanipulation med greb-og-løft-tjek i simulering.

  • Præcis kollisionsgeometri

    Mesh-kollidere og USD Physics-skemaer beskriver de kontakter og begrænsninger, der bruges under interaktion.

Fra referencebilleder til validerede aktiver

Rekonstruktionsarbejdsgangen forbinder udseende, geometri og fysisk adfærd.

  1. 01

    Reference input

    Start med billeder af et enkelt objekt eller en hel scene. Referenceindgange og dimensioner styrer rekonstruktionen.

  2. 02

    3D rekonstruktion

    Skab geometri, PBR-teksturer, separate masker til semantiske dele og simuleringsklar fysik i et struktureret aktiv.

  3. 03

    Isaac Sim validering

    Test og kalibrer aktivet i simulering, kontroller dets adfærd gennem kontakt, artikulation og manipulation.

In-simuleringstjek

  • Stabilisering
  • Drop
  • Glidning
  • Bevægelse af mekaniske led
  • Tag fat og løft

Simuleringsdata til robotlæring

Aktiv- og scenevariation

Procedurel variation udvider et miljø til flere konfigurationer baseret på virkelige distributioner. Strukturerede scener bevarer de aktiver, fysik og opgavedefinitioner, der er nødvendige for simulering.

Imitations-læringsbaner

Robotbaner fanger interaktioner med miljøet. Semantiske dele, definerede robotgribepunkter og valideret fysik understøtter de manipulationsopgaver, der bruges til at producere efterligningsdata.

Diskuter et Physical AI-projekt

Del referenceinput, målmiljø og robotopgaver. Holdet kan diskutere rekonstruktion, scenegenerering og simuleringsdatakrav.

Kontakt Thrixel