Thrixel dla fizycznej AI

Światy gotowe do symulacji do nauki robotów

Zamień dane wejściowe i specyfikacje ze świata rzeczywistego w ustrukturyzowane zasoby 3D, kompletne środowiska i dane symulacyjne dla fizycznej sztucznej inteligencji.

Interakcja robota w kuchni generowanej przez Thrixel. Demonstracja pokazana przy prędkości 3×.

Tworzenie 3D dla fizycznej sztucznej inteligencji

Zrekonstruuj istniejące środowisko lub wygeneruj ustrukturyzowaną scenę na podstawie specyfikacji.

Z danych wejściowych ze świata rzeczywistego

Cyfrowa rekonstrukcja bliźniaka

Zdjęcia i wideo stają się zasobami 3D i środowiskami złożonymi z wielu obiektów z siatkami trójkątów, materiałami PBR i oddzielnymi częściami semantycznymi. Dane wyjściowe USDA zawierają strukturę i fizykę niezbędną w procesach symulacji.

Ze specyfikacji sceny

Dane symulacyjne na dużą skalę

Generuj sceny o pełnej strukturze z zasobami gotowymi do symulacji i odpowiednimi definicjami zadań. Zmieniaj zasoby i układy, korzystając z rozkładów w świecie rzeczywistym, i twórz trajektorie robotów w celu uczenia się przez naśladownictwo.

Od monitu do ukończenia sceny SimReady

Środowisko z obiektami przegubowymi, materiałami fizycznymi i geometrią zderzeń, gotowe do interakcji w symulacji. Co to jest SimReady 3D?

Kompletne środowisko kuchenne z meblami, urządzeniami i przedmiotami przegubowymi. Przelot pokazany z prędkością 2×.
  • Fizyka stawów

    Części przegubowe modelują sposób poruszania się i interakcji drzwi, pokryw i innych komponentów.

  • Materiały fizyczne

    Właściwości powierzchni fizycznej wspierają kontakt i ruch w symulacji.

  • Prawidłowe zderzacze

    Geometria kolizyjna zapewnia obiektom fizyczną obecność umożliwiającą manipulację i interakcję z otoczeniem.

Semantyczny 3D dla interakcji robotów

Zasoby niosą informacje o swoich komponentach, powierzchniach styku i miejscach uchwytów.

  • Rozumowanie części semantycznej

    Oddzielne siatki identyfikują istotne komponenty, dzięki czemu uchwyt, drzwi i korpus szafki mogą uczestniczyć w zadaniu.

  • Autorskie punkty uchwytu

    Autorzy Thrixel chwytają miejsca do manipulacji robotem, za pomocą kontroli chwytania i podnoszenia w symulacji.

  • Precyzyjna geometria kolizyjna

    Zderzacze siatkowe i schematy USD Physics opisują kontakty i ograniczenia stosowane podczas interakcji.

Od zdjęć referencyjnych do zweryfikowanych zasobów

Proces rekonstrukcji łączy wygląd, geometrię i zachowanie fizyczne.

  1. 01

    Wejścia odniesienia

    Zacznij od zdjęcia pojedynczego obiektu lub całej sceny. Dane wejściowe i wymiary referencyjne kierują rekonstrukcją.

  2. 02

    Rekonstrukcja 3D

    Twórz geometrię, tekstury PBR, oddzielne siatki dla części semantycznych i fizykę gotową do symulacji w zasobach strukturalnych.

  3. 03

    Walidacja Isaaca Sima

    Przetestuj i skalibruj zasób w symulacji, sprawdzając jego zachowanie poprzez kontakt, artykulację i manipulację.

Kontrole w trakcie symulacji

  • Usiądź
  • Upuść
  • Slajd
  • Artykulacja stawu
  • Chwyć i podnieś

Dane symulacyjne do uczenia się robotów

Zróżnicowanie zasobów i scen

Wariacja proceduralna rozszerza środowisko na wiele konfiguracji w oparciu o rozkłady w świecie rzeczywistym. Ustrukturyzowane sceny zachowują zasoby, fizykę i definicje zadań potrzebne do symulacji.

Trajektorie uczenia się przez naśladownictwo

Trajektorie robotów rejestrują interakcje z otoczeniem. Części semantyczne, autorskie punkty uchwytu i potwierdzona fizyka wspierają zadania manipulacyjne wykorzystywane do tworzenia imitacji danych.

Omów projekt fizycznej sztucznej inteligencji

Udostępnij dane wejściowe referencyjne, środowisko docelowe i zadania robota. Zespół może omówić wymagania dotyczące rekonstrukcji, generowania scen i danych symulacyjnych.

Skontaktuj się z Thrixel