Thrixel untuk Physical AI

Dunia yang siap simulasi untuk pembelajaran robot

Ubah input dan spesifikasi dunia nyata menjadi aset 3D terstruktur, lingkungan lengkap, dan data simulasi untuk AI fisik.

Interaksi robot di dapur yang dihasilkan Thrixel. Demonstrasi ditampilkan pada kecepatan 3×.

Pembuatan 3D untuk Physical AI

Rekonstruksi lingkungan yang ada atau hasilkan adegan terstruktur dari spesifikasi.

Dari masukan dunia nyata

Rekonstruksi kembar digital

Foto dan video menjadi aset 3D dan lingkungan multi-objek dengan mesh segitiga, materi PBR, dan bagian semantik terpisah. Output USDA membawa struktur dan fisika yang diperlukan untuk alur kerja simulasi.

Dari spesifikasi adegan

Data simulasi dalam skala besar

Hasilkan adegan terstruktur penuh dengan aset siap simulasi dan definisi tugas yang sesuai. Variasikan aset dan tata letak menggunakan distribusi dunia nyata, dan hasilkan lintasan robot untuk pembelajaran imitasi.

Dari Prompt ke Scene SimReady Lengkap

Lingkungan dengan objek artikulasi, materi fisika, dan geometri tumbukan, siap untuk berinteraksi dalam simulasi. Apa itu SimReady 3D?

Lingkungan dapur lengkap dengan furnitur, peralatan, dan benda artikulasi. Flythrough ditampilkan dengan kecepatan 2×.
  • Sendi fisika

    Bagian artikulasi memodelkan bagaimana pintu, tutup, dan komponen lainnya bergerak dan berinteraksi.

  • materi fisika

    Properti permukaan fisik mendukung kontak dan gerakan dalam simulasi.

  • Collider yang valid

    Geometri tumbukan memberikan objek kehadiran fisik untuk manipulasi dan interaksi lingkungan.

3D Semantik untuk Interaksi Robot

Aset membawa informasi tentang komponennya, permukaan kontak, dan lokasi genggamannya.

  • Penalaran bagian semantik

    Jerat terpisah mengidentifikasi komponen yang bermakna, sehingga pegangan, pintu, dan badan kabinet masing-masing dapat berpartisipasi dalam suatu tugas.

  • Titik genggaman yang ditentukan

    Thrixel menentukan lokasi genggaman untuk manipulasi oleh robot, lalu menguji gerakan menggenggam dan mengangkat dalam simulasi.

  • Geometri tumbukan yang tepat

    Penumbuk mesh dan skema USD Physics menjelaskan kontak dan batasan yang digunakan selama interaksi.

Dari Citra Referensi hingga Aset yang Divalidasi

Alur kerja rekonstruksi menghubungkan penampilan, geometri, dan perilaku fisik.

  1. 01

    masukan referensi

    Mulailah dengan pencitraan satu objek atau keseluruhan pemandangan. Masukan referensi dan dimensi memandu rekonstruksi.

  2. 02

    Rekonstruksi 3D

    Buat geometri, tekstur PBR, mesh terpisah untuk bagian semantik, dan fisika siap simulasi dalam aset terstruktur.

  3. 03

    validasi Isaac Sim

    Uji dan kalibrasi aset dalam simulasi, periksa perilakunya melalui kontak, artikulasi, dan manipulasi.

Pemeriksaan dalam simulasi

  • Uji kestabilan
  • Jatuhkan
  • Geser
  • Artikulasi sendi
  • Pegang dan angkat

Data Simulasi Pembelajaran Robot

Variasi aset dan adegan

Variasi prosedural memperluas lingkungan menjadi beberapa konfigurasi berdasarkan distribusi dunia nyata. Adegan terstruktur mempertahankan aset, fisika, dan definisi tugas yang diperlukan untuk simulasi.

Lintasan pembelajaran imitasi

Lintasan robot merekam interaksi dengan lingkungan. Bagian semantik, titik genggaman yang ditentukan, dan fisika yang telah divalidasi mendukung tugas manipulasi untuk menghasilkan data pembelajaran imitasi.

Diskusikan Proyek Physical AI

Bagikan masukan referensi, lingkungan target, dan tugas robot. Tim dapat mendiskusikan kebutuhan rekonstruksi, pembuatan pemandangan, dan data simulasi.

Hubungi Thrixel