Apa itu SimReady 3D?

Apa yang dimaksud dengan SimReady?

SimReady berarti siap untuk simulasi. Aset 3D SimReady berisi informasi yang dapat digunakan simulator untuk menafsirkan objek dan perilakunya, serta geometri dan material yang terlihat. Tergantung pada tugasnya, informasi tersebut dapat mencakup bentuk tumbukan, massa, gesekan, label semantik, dan komponen artikulasi.

SimReady juga menyebutkan kerangka spesifikasi yang diprakarsai oleh NVIDIA dan dibangun di atas OpenUSD. Ini mendefinisikan kemampuan simulasi melalui properti terstruktur dan metadata. Persyaratan yang berlaku bergantung pada tujuan penggunaan aset; objek yang digunakan untuk persepsi kamera dan objek yang digunakan untuk manipulasi robot memerlukan kemampuan yang berbeda. Ikhtisar spesifikasi SimReady NVIDIA menjelaskan pendekatan ini.

Apa perbedaan aset SimReady dengan model 3D biasa?

Model bertekstur menggambarkan bentuk dan tampilan suatu objek. Simulator juga perlu mengetahui bagaimana objek tersebut menempati ruang, merespons kontak, dan bergerak. Lemari dapur yang realistis menggambarkan perbedaannya: gambar yang ditampilkan mungkin menunjukkan pintu dan pegangan, sementara interaksi robot mengharuskan komponen tersebut memiliki geometri yang dapat digunakan, bentuk tumbukan, dan sambungan yang sesuai.

Aset siap game mungkin sudah menyertakan tabrakan dan animasi, namun penyiapannya dirancang untuk game tertentu. Tugas pembelajaran robot mungkin memerlukan dimensi yang dikalibrasi, parameter fisik, anotasi semantik, dan validasi terhadap interaksi yang dimaksudkan. Kesiapan dievaluasi berdasarkan tugas dan waktu proses simulasi tersebut.

Apa yang membuat aset 3D siap digunakan dalam simulasi?

Geometri, skala, dan material

Dimensi, orientasi, dan struktur objek harus sesuai dengan lingkungan yang diinginkan. Pencengkeram dan pegangan robot harus diwakili pada skala yang kompatibel. Materi visual dan tekstur mendukung pengamatan yang diberikan, sedangkan sifat fisik materi menggambarkan perilaku seperti gesekan dan pantulan. panduan pemodelan NVIDIA menekankan skala dunia nyata dan konstruksi aset yang konsisten.

Geometri tumbukan dan sifat fisik

Bentuk tumbukan menentukan tempat terjadinya kontak. Massa dan inersia mempengaruhi bagaimana benda bergerak merespons gaya; gesekan mempengaruhi apakah permukaan tergelincir. Properti ini harus sesuai dengan objek dan tugas. Geometri mesh dan tumbukan yang terlihat dapat berbeda, misalnya ketika representasi tumbukan yang lebih sederhana meningkatkan kinerja simulasi. USD Physics menyediakan skema untuk mendeskripsikan properti fisik dalam adegan OpenUSD.

Label semantik dan bagian yang bermakna

Informasi semantik mengidentifikasi apa yang diwakili oleh suatu objek atau komponen. Label seperti kabinet, pintu, dan pegangan mendukung interpretasi adegan dan data pelatihan beranotasi. Geometri bagian yang terpisah memungkinkan komponen-komponen tersebut dipilih dan dimanipulasi secara individual. Pelabelan semantik juga dapat mendukung identifikasi objek dalam gambar yang dirender untuk pembelajaran mesin.

Sendi dan titik genggaman khusus tugas

Tugas pembukaan kabinet memerlukan sambungan pintu dengan sumbu dan batas gerak yang sesuai. Tugas pengambilan dan penempatan memerlukan permukaan kontak yang dapat diakses dan lokasi genggaman yang berguna. Ini adalah tambahan khusus tugas: objek latar belakang statis tidak memerlukan semua kemampuan yang diperlukan oleh aset manipulasi artikulasi.

Mengapa aset SimReady penting bagi AI fisik?

Sistem Physical AI memahami dan bertindak di lingkungan fisik. Simulasi memberi tim pengembangan robot tempat untuk menguji tugas, mengubah kondisi, dan mengumpulkan data. Kualitas aset memengaruhi eksperimen tersebut: collider yang keliru dapat menghalangi genggaman yang seharusnya berhasil, dan skala pegangan yang salah dapat menentukan apakah robot mampu menjalankan tugas.

Aset terstruktur juga membuat variasi menjadi lebih berguna. Adegan dapat mengubah penempatan objek, dimensi, atau properti material sambil tetap mempertahankan informasi yang diperlukan untuk menjalankan tugas. Variasi ini mendukung pembelajaran robot dan alur kerja evaluasi, meskipun kinerja dalam simulasi masih memerlukan evaluasi terhadap tujuan dunia nyata.

Bagaimana Anda memvalidasi aset SimReady di Isaac Sim?

Validasi mencakup pemeriksaan struktur aset dan mengamati perilakunya di simulator target. Alur kerja AI fisik Thrixel menggunakan Isaac Sim untuk pengujian seperti:

• Menetap: letakkan benda pada penyangga yang diinginkan dan periksa apakah benda tersebut berhenti seperti yang diharapkan.
• Jatuhkan: periksa respons dan stabilitas kontak saat benda mendarat.
• Geser: periksa bagaimana permukaan berinteraksi saat bergerak.
• Artikulasi sambungan: periksa sumbu, jangkauan, dan pergerakan pintu, tutup, atau bagian artikulasi lainnya.
• Pegang dan angkat: uji apakah robot dapat melakukan kontak, menahan, dan mengangkat objek yang dituju.

Tes harus mencerminkan tugas yang dimaksudkan. Sebuah pintu yang terbuka dengan benar secara terpisah juga perlu diperiksa di dalam kabinetnya, dengan adanya benda-benda di sekitarnya dan robot. Validasi aset dan validasi adegan mengatasi berbagai sumber kegagalan.

Bisakah AI menghasilkan aset SimReady dan seluruh adegan?

AI dapat menghasilkan geometri dan tampilan dari petunjuk atau citra referensi, kemudian mendukung persiapan bagian, fisika, dan informasi tugas. Generator model AI 3D Thrixel menyediakan aset yang dapat diedit untuk proses ini. Alur kerja yang lengkap juga merakit lingkungan dan memeriksa perilakunya dalam simulasi. Panduan AI generatif 3D menjelaskan alur kerja pembuatan model yang mendasarinya.

Thrixel untuk AI fisik mencakup rekonstruksi kembaran digital dari foto dan video, pembuatan scene terstruktur, bagian semantik, penentuan titik genggaman, dan validasi simulasi. Alur kerja menghasilkan mesh segitiga dengan material PBR serta scene USDA yang memuat informasi simulasi. Alur ini juga mendukung variasi aset dan scene serta lintasan robot untuk pembelajaran imitasi.

Untuk pembuatan dunia interaktif dengan agen coding, Build World menghubungkan pembuatan aset dengan perakitan adegan dan inspeksi berulang. Proyek Physical AI menambahkan persyaratan seperti tugas robot, kalibrasi fisika, dan validasi khusus simulator. Diskusi proyek AI fisik Thrixel dimulai dengan persyaratan tersebut dan masukan referensi yang tersedia.

Pertanyaan umum tentang aset 3D SimReady

Apakah setiap file USD merupakan aset SimReady?

Tidak. OpenUSD dapat mendeskripsikan pemandangan tanpa memuat kemampuan simulasi yang diperlukan oleh suatu tugas. File tersebut memerlukan properti terstruktur, semantik, dan validasi yang sesuai. FAQ SimReady NVIDIA menjelaskan mengapa menyimpan data di USD saja tidak membentuk kesiapan simulasi.

Apakah aset SimReady sama dengan digital twins?

Istilah-istilah tersebut menggambarkan berbagai aspek suatu aset. Kembaran digital mewakili objek atau lingkungan dunia nyata tertentu. Kesiapan simulasi menggambarkan kemampuan yang diperlukan untuk menggunakan representasi tersebut dalam simulasi. Dapur yang direkonstruksi dapat disiapkan untuk simulasi, sedangkan dapur SimReady yang dihasilkan tidak perlu berhubungan dengan satu dapur nyata tertentu.

Bisakah model 3D yang ada siap untuk simulasi?

Ya. Jaring yang sudah ada bisa menjadi titik awal. Persiapan mungkin melibatkan koreksi skala, pemisahan bagian yang bergerak, pembuatan geometri tumbukan dan properti fisik, penambahan label semantik, dan pengujian hasilnya dalam simulator target. Pekerjaan tersebut bergantung pada struktur model dan tugas yang dimaksudkan.

Apakah semua aset SimReady memerlukan titik sambungan atau pegangan?

Tidak. Kemampuan tersebut bergantung pada interaksi. Lantai membutuhkan geometri dan perilaku kontak yang sesuai; laci pembuka perlu artikulasi; objek yang dimaksudkan untuk digenggam memerlukan pengaturan manipulasi. Persyaratan simulasi yang relevan menentukan apa yang harus ditulis dan diperiksa.