Thrixel per l'IA fisica

Mondi pronti per la simulazione per l'apprendimento dei robot

Trasforma input e specifiche del mondo reale in risorse 3D strutturate, ambienti completi e dati di simulazione per l'intelligenza artificiale fisica.

Interazione tra robot in una cucina generata da Thrixel. Dimostrazione mostrata a velocità 3×.

Creazione 3D per l'IA fisica

Ricostruire un ambiente esistente o generare una scena strutturata da una specifica.

Da input del mondo reale

Ricostruzione del gemello digitale

Foto e video diventano risorse 3D e ambienti multi-oggetto con mesh triangolari, materiali PBR e parti semantiche separate. L'output USDA contiene la struttura e la fisica necessarie per i flussi di lavoro di simulazione.

Da una specificazione di scena

Dati di simulazione su scala

Genera scene completamente strutturate con risorse pronte per la simulazione e definizioni di attività corrispondenti. Varia risorse e layout utilizzando distribuzioni del mondo reale e produci traiettorie robotiche per l'apprendimento simulato.

Dalla scena Prompt alla scena SimReady completa

Un ambiente con oggetti articolati, materiali fisici e geometria di collisione, pronti per l'interazione nella simulazione. Cos'è SimReady 3D?

Un ambiente cucina completo di mobili, elettrodomestici e oggetti articolati. Flythrough mostrato a velocità 2×.
  • Giunti fisici

    Le parti articolate modellano il modo in cui porte, coperchi e altri componenti si muovono e interagiscono.

  • Materiali di fisica

    Le proprietà fisiche della superficie supportano il contatto e il movimento all'interno della simulazione.

  • Collider validi

    La geometria delle collisioni conferisce agli oggetti una presenza fisica per la manipolazione e l'interazione con l'ambiente.

3D semantico per l'interazione tra robot

Le risorse contengono informazioni sui loro componenti, sulle superfici di contatto e sulle posizioni di presa.

  • Ragionamento della parte semantica

    Mesh separate identificano componenti significativi, in modo che una maniglia, una porta e il corpo dell'armadio possano partecipare ciascuno a un'attività.

  • Punti di comprensione scritti

    Gli autori di Thrixel afferrano le posizioni per la manipolazione del robot, con controlli di presa e sollevamento nella simulazione.

  • Geometria di collisione precisa

    I collisori mesh e gli schemi fisici USD descrivono i contatti e i vincoli utilizzati durante l'interazione.

Dalle immagini di riferimento alle risorse convalidate

Il flusso di lavoro di ricostruzione collega l'aspetto, la geometria e il comportamento fisico.

  1. 01

    Ingressi di riferimento

    Inizia con le immagini di un singolo oggetto o di un'intera scena. Gli input e le dimensioni di riferimento guidano la ricostruzione.

  2. 02

    Ricostruzione 3D

    Crea geometria, texture PBR, mesh separate per parti semantiche e fisica pronta per la simulazione in una risorsa strutturata.

  3. 03

    Convalida Isaac Sim

    Testare e calibrare l'asset in simulazione, verificandone il comportamento attraverso contatto, articolazione e manipolazione.

Verifiche in simulazione

  • Saldare
  • Rilascia
  • Diapositiva
  • Articolazione articolare
  • Afferrare e sollevare

Dati di simulazione per l'apprendimento dei robot

Variazione di asset e scene

La variazione procedurale espande un ambiente in molteplici configurazioni basate su distribuzioni del mondo reale. Le scene strutturate conservano le risorse, la fisica e le definizioni delle attività necessarie per la simulazione.

Traiettorie di apprendimento per imitazione

Le traiettorie dei robot catturano le interazioni con l'ambiente. Parti semantiche, punti di comprensione creati e fisica convalidata supportano le attività di manipolazione utilizzate per produrre dati di imitazione.

Discutere un progetto di intelligenza artificiale fisica

Condividere gli input di riferimento, l'ambiente di destinazione e le attività del robot. Il team può discutere la ricostruzione, la generazione della scena e i requisiti dei dati di simulazione.

Contattare Thrixel