Thrixel, skirtas Physical AI

Modeliavimui paruošti pasauliai robotų mokymuisi

Realias įvestis ir specifikacijas paverskite struktūrizuotu 3D turtu, visapusiška aplinka ir fizinio AI modeliavimo duomenimis.

Roboto sąveika Thrixel sukurtoje virtuvėje. Demonstracija rodoma 3× greičiu.

3D kūrimas, skirtas Physical AI

Rekonstruoti esamą aplinką arba generuoti struktūrizuotą sceną pagal specifikaciją.

Iš realaus pasaulio įvesties

Skaitmeninė dvynių rekonstrukcija

Nuotraukos ir vaizdo įrašai tampa 3D turtu ir kelių objektų aplinka su trikampiais tinkleliais, PBR medžiagomis ir atskiromis semantinėmis dalimis. USDA išvestis turi struktūrą ir fiziką, reikalingą modeliavimo darbo eigoms.

Iš scenos specifikacijos

Didelės apimties simuliacijos duomenys

Generuokite visiškai struktūrizuotas scenas naudodami modeliavimui paruoštus 3D išteklius ir atitinkamus užduočių apibrėžimus. Keiskite 3D išteklius ir išdėstymus naudodamiesi realaus pasaulio paskirstymais ir kurkite robotų trajektorijas imitaciniam mokymuisi.

Nuo raginimo iki užbaigtos SimReady scenos

Aplinka su sujungtais objektais, fizinėmis medžiagomis ir susidūrimo geometrija, paruošta sąveikai modeliuojant. Kas yra SimReady 3D?

Pilna virtuvės aplinka su baldais, buitine technika ir šarnyriniais daiktais. Skrydis rodomas 2× greičiu.
  • Fizikinės jungtys

    Šarnyrinės dalys modeliuoja, kaip durys, dangčiai ir kiti komponentai juda ir sąveikauja.

  • Fizikos medžiagos

    Fizinės paviršiaus savybės palaiko kontaktą ir judėjimą modeliavimo metu.

  • Tinkama susidūrimo geometrija

    Susidūrimo geometrija suteikia objektams fizinį buvimą manipuliavimui ir aplinkos sąveikai.

Semantinė 3D, skirta robotų sąveikai

3D ištekliai turi informaciją apie jų komponentus, kontaktinius paviršius ir griebimo vietas.

  • Semantinės dalies samprotavimai

    Atskiri tinkleliai identifikuoja reikšmingus komponentus, todėl rankena, durys ir spintelės korpusas gali dalyvauti atliekant užduotį.

  • Apibrėžti roboto sugriebimo taškai

    Thrixel apibrėžia roboto sugriebimo vietas, skirtas manipuliuoti robotu, modeliuojant sugriebimo ir pakėlimo patikrinimus.

  • Tiksli susidūrimo geometrija

    Susidūrimo tinkleliai ir USD Physics schemos aprašo sąveikos metu naudojamus kontaktus ir apribojimus.

Nuo informacinių vaizdų iki patvirtintų 3D išteklių

Rekonstrukcijos darbo eiga susieja išvaizdą, geometriją ir fizinį elgesį.

  1. 01

    Atskaitos įėjimai

    Pradėkite nuo vieno objekto arba visos scenos vaizdų. Atliekant rekonstrukciją vadovaujamasi atskaitos įvestimis ir matmenimis.

  2. 02

    3D rekonstrukcija

    Sukurkite geometriją, PBR tekstūras, atskirus tinklelius semantinėms dalims ir modeliavimui paruoštą fiziką struktūrizuotame 3D šaltinyje.

  3. 03

    Isaac Sim patvirtinimas

    Išbandykite ir sukalibruokite 3D išteklius modeliuodami, patikrindami jo elgseną per kontaktą, artikuliaciją ir manipuliavimą.

Simuliaciniai patikrinimai

  • Nusistovėjimas
  • Numetimas
  • Slydimas
  • Mechaninių jungčių judėjimas
  • Suėmimas ir pakėlimas

Modeliavimo duomenys robotų mokymuisi

Su Thrixel sugeneruoti 3D išteklių ir tekstūrų variantai.

3D išteklių ir scenos variacijos

Procedūrinis variantas išplečia aplinką į kelias konfigūracijas, pagrįstas realaus pasaulio paskirstymais. Struktūrizuotose scenose išsaugomi 3D ištekliai, fizika ir užduočių apibrėžimai, reikalingi modeliavimui.

Imitacinio mokymosi trajektorijos

Robotų trajektorijos fiksuoja sąveiką su aplinka. Semantinės dalys, apibrėžti roboto sugriebimo taškai ir patvirtinta fizika palaiko manipuliavimo užduotis, naudojamas imitaciniams duomenims gaminti.

Aptarkite Physical AI projektą

Pasidalykite atskaitos įvestimis, tiksline aplinka ir roboto užduotimis. Komanda gali aptarti rekonstrukcijos, scenos generavimo ir modeliavimo duomenų reikalavimus.

Susisiekite su Thrixel