Apakah SimReady 3D?
Aset SimReady 3D menggabungkan geometri dan rupa dengan struktur dan sifat fizikal yang diperlukan untuk simulasi. Mereka membantu mengubah pemandangan visual menjadi persekitaran yang boleh dilihat dan berinteraksi dengan robot.
Apakah maksud SimReady?
SimReady bermaksud sedia simulasi. Aset 3D SimReady mengandungi maklumat yang boleh digunakan oleh simulator untuk mentafsir objek dan kelakuannya, di samping geometri dan bahan yang boleh dilihat. Bergantung pada tugas, maklumat itu boleh termasuk bentuk perlanggaran, jisim, geseran, label semantik dan komponen yang diartikulasikan.
SimReady juga merupakan nama rangka kerja spesifikasi yang dimulakan oleh NVIDIA dan berasaskan OpenUSD. Ia mentakrifkan keupayaan simulasi melalui sifat berstruktur dan metadata. Keperluan bergantung pada tujuan aset; objek untuk persepsi kamera dan objek untuk manipulasi robot memerlukan keupayaan berbeza. Gambaran keseluruhan spesifikasi SimReady oleh NVIDIA menerangkan pendekatan ini.
Bagaimanakah aset SimReady berbeza daripada model 3D biasa?
Model bertekstur menerangkan bentuk dan rupa objek. Simulator juga perlu mengetahui cara objek itu menempati ruang, bertindak balas terhadap sentuhan dan bergerak. Kabinet dapur yang realistik menggambarkan perbezaannya: imej yang dihasilkannya mungkin menunjukkan pintu dan pemegang, manakala interaksi robot memerlukan komponen tersebut mempunyai geometri yang boleh digunakan, bentuk perlanggaran dan sambungan yang sesuai.
Aset sedia permainan mungkin sudah termasuk perlanggaran dan animasi, tetapi persediaannya direka untuk permainan tertentu. Tugas pembelajaran robot mungkin memerlukan dimensi yang ditentukur, parameter fizikal, anotasi semantik dan pengesahan terhadap interaksi yang dimaksudkan. Kesediaan dinilai berdasarkan tugas dan masa jalan simulasi itu.
Apakah yang menjadikan simulasi aset 3D sedia?
Geometri, skala dan bahan
Dimensi, orientasi dan struktur objek perlu sepadan dengan persekitaran yang dimaksudkan. Penggenggam robot dan pemegang mesti diwakili pada skala yang serasi. Bahan dan tekstur visual menyokong pemerhatian yang diberikan, manakala sifat bahan fizikal menggambarkan tingkah laku seperti geseran dan lantunan. panduan pemodelan NVIDIA menekankan skala dunia sebenar dan pembinaan aset yang konsisten.
Geometri perlanggaran dan sifat fizikal
Bentuk perlanggaran menentukan di mana sentuhan berlaku. Jisim dan inersia mempengaruhi cara objek bergerak bertindak balas kepada daya; geseran mempengaruhi sama ada permukaan gelongsor. Sifat ini perlu sesuai dengan objek dan tugas. Geometri jejaring dan perlanggaran yang boleh dilihat boleh berbeza, contohnya apabila perwakilan perlanggaran yang lebih mudah meningkatkan prestasi simulasi. USD Physics menyediakan skema untuk menerangkan sifat fizikal dalam pemandangan OpenUSD.
Label semantik dan bahagian yang bermakna
Maklumat semantik mengenal pasti perkara yang diwakili oleh objek atau komponen. Label seperti kabinet, pintu dan pemegang tafsiran adegan sokongan dan data latihan beranotasi. Geometri bahagian berasingan membolehkan komponen tersebut dipilih dan dimanipulasi secara individu. Pelabelan semantik juga boleh menyokong mengenal pasti objek dalam imej yang diberikan untuk pembelajaran mesin.
Sambungan khusus tugasan dan mata pegang
Tugas membuka kabinet memerlukan sambungan pintu dengan paksi dan had gerakan yang sesuai. Tugas pilih-dan-tempat memerlukan permukaan kenalan yang boleh diakses dan lokasi genggaman yang berguna. Ini adalah tambahan khusus tugas: objek latar belakang statik tidak memerlukan setiap keupayaan yang diperlukan oleh aset manipulasi yang diartikulasikan.
Mengapakah aset SimReady penting untuk AI fizikal?
Sistem Physical AI melihat dan bertindak dalam persekitaran fizikal. Simulasi memberi pasukan pembangunan robot tempat untuk menjalankan tugas, mengubah keadaan dan mengumpul data. Kualiti aset mempengaruhi percubaan tersebut: pelanggar yang salah boleh menyekat genggaman yang sah dan pemegang skala yang salah boleh mengubah sama ada tugas itu boleh dicapai.
Aset berstruktur juga menjadikan variasi lebih berguna. Pemandangan boleh menukar peletakan objek, dimensi atau sifat bahan sambil mengekalkan maklumat yang diperlukan untuk menjalankan tugas. Variasi ini menyokong aliran kerja pembelajaran robot dan penilaian, walaupun prestasi dalam simulasi masih memerlukan penilaian terhadap objektif dunia sebenar.
Bagaimanakah anda mengesahkan aset SimReady dalam Isaac Sim?
Pengesahan termasuk menyemak struktur aset dan memerhati kelakuannya dalam simulator sasaran. Aliran kerja AI fizikal Thrixel menggunakan Isaac Sim untuk ujian seperti:
- Menjadi stabil: letakkan objek pada permukaan sokongan yang dimaksudkan dan periksa sama ada objek berhenti dengan stabil seperti yang dijangkakan.
- Jatuhkan: semak tindak balas hubungan dan kestabilan apabila objek mendarat.
- Gelongsoran: periksa interaksi permukaan semasa bergerak.
- Pergerakan sambungan mekanikal: periksa paksi, julat dan pergerakan pintu, penutup atau bahagian bersendi lain.
- Pegang dan angkat: uji sama ada robot boleh membuat sentuhan, memegang dan mengangkat objek yang dimaksudkan.
Ujian harus mencerminkan tugas yang dimaksudkan. Pintu yang terbuka dengan betul dalam pengasingan juga perlu diperiksa di dalam kabinetnya, dengan objek di sekeliling dan robot hadir. Pengesahan aset dan pengesahan adegan menangani sumber kegagalan yang berbeza.
Bolehkah AI menjana aset SimReady dan keseluruhan adegan?
AI boleh menjana geometri dan penampilan daripada gesaan atau imejan rujukan, kemudian menyokong penyediaan bahagian, fizik dan maklumat tugas. Penjana model AI 3D Thrixel menyediakan aset boleh diedit untuk proses ini. Aliran kerja yang lengkap juga mengumpulkan persekitaran dan menyemak tingkah lakunya dalam simulasi. Panduan AI generatif 3D menerangkan aliran kerja penjanaan model yang mendasari.
Thrixel untuk AI fizikal meliputi pembinaan semula kembar digital daripada foto dan video, penjanaan pemandangan berstruktur, bahagian semantik, titik cengkaman robot yang ditentukan dan pengesahan simulasi. Aliran kerja menghasilkan jerat segi tiga dengan bahan PBR dan output pemandangan USDA yang membawa maklumat simulasi. Ia juga menyokong variasi aset dan pemandangan serta trajektori robot untuk pembelajaran tiruan.
Untuk penciptaan dunia interaktif dengan ejen pengaturcaraan AI, Build World menghubungkan penjanaan aset kepada pemasangan pemandangan dan pemeriksaan berulang. Projek Physical AI menambah keperluan seperti tugas robot, penentukuran fizik dan pengesahan khusus simulator. perbincangan projek AI fizikal Thrixel bermula dengan keperluan tersebut dan input rujukan yang tersedia.
Soalan lazim tentang aset 3D SimReady
Adakah setiap USD memfailkan aset SimReady?
Tidak. OpenUSD boleh menerangkan pemandangan tanpa mengandungi keupayaan simulasi yang diperlukan oleh tugas. Fail memerlukan sifat berstruktur, semantik dan pengesahan yang sesuai. Soalan Lazim SimReady NVIDIA menerangkan sebab menyimpan data dalam USD sahaja tidak mewujudkan kesediaan simulasi.
Adakah aset SimReady sama dengan kembar digital?
Istilah tersebut menerangkan aspek yang berbeza bagi sesuatu aset. Kembar digital mewakili objek atau persekitaran dunia nyata tertentu. Kesediaan simulasi menerangkan keupayaan yang diperlukan untuk menggunakan perwakilan tersebut dalam simulasi. Dapur yang dibina semula boleh disediakan untuk simulasi, manakala dapur SimReady yang dijana tidak perlu sepadan dengan satu dapur sebenar yang khusus.
Bolehkah model 3D sedia ada menjadi sedia simulasi?
ya. Mesh sedia ada boleh menjadi titik permulaan. Penyediaan mungkin melibatkan skala pembetulan, mengasingkan bahagian bergerak, mengarang geometri perlanggaran dan sifat fizikal, menambah label semantik dan menguji keputusan dalam simulator sasaran. Kerja bergantung pada struktur model dan tugas yang dimaksudkan.
Adakah semua aset SimReady memerlukan sambungan atau mata pegang?
Tidak. Keupayaan tersebut bergantung pada interaksi. Lantai memerlukan geometri yang sesuai dan tingkah laku sentuhan; laci pembukaan memerlukan artikulasi; objek yang bertujuan untuk menangkap memerlukan persediaan manipulasi. Keperluan simulasi yang berkaitan menentukan perkara yang mesti dikarang dan diperiksa.