Thrixel สำหรับ Physical AI

โลกที่พร้อมจำลองสำหรับการเรียนรู้หุ่นยนต์

เปลี่ยนอินพุตและข้อกำหนดในโลกแห่งความเป็นจริงให้เป็นแอสเซท 3 มิติที่มีโครงสร้าง สภาพแวดล้อมที่สมบูรณ์ และข้อมูลการจำลองสำหรับ AI ทางกายภาพ

ปฏิสัมพันธ์ของหุ่นยนต์ในครัวที่สร้างโดย Thrixel สาธิตการแสดงด้วยความเร็ว 3×

การสร้าง 3 มิติสำหรับ Physical AI

สร้างสภาพแวดล้อมที่มีอยู่ใหม่หรือสร้างฉากที่มีโครงสร้างจากข้อกำหนด

จากอินพุตในโลกแห่งความเป็นจริง

การสร้างแฝดแบบดิจิทัล

ภาพถ่ายและวิดีโอกลายเป็นเนื้อหา 3 มิติและสภาพแวดล้อมหลายวัตถุด้วยตาข่ายสามเหลี่ยม วัสดุ PBR และส่วนความหมายที่แยกจากกัน เอาต์พุต USDA มีโครงสร้างและฟิสิกส์ที่จำเป็นสำหรับเวิร์กโฟลว์การจำลอง

จากการกำหนดฉาก

ข้อมูลการจำลองในระดับ

สร้างฉากที่มีโครงสร้างเต็มรูปแบบด้วยเนื้อหาที่พร้อมสำหรับการจำลองและคำจำกัดความของงานที่เกี่ยวข้อง เปลี่ยนแปลงเนื้อหาและเลย์เอาต์โดยใช้การกระจายในโลกแห่งความเป็นจริง และสร้างวิถีหุ่นยนต์สำหรับการเรียนรู้แบบเลียนแบบ

จากพร้อมท์ไปจนถึงฉาก SimReady ที่สมบูรณ์

สภาพแวดล้อมที่มีวัตถุที่เชื่อมต่อกัน วัสดุทางฟิสิกส์ และเรขาคณิตการชนกัน พร้อมสำหรับการโต้ตอบในการจำลอง SimReady 3D คืออะไร

สภาพแวดล้อมในห้องครัวที่สมบูรณ์พร้อมเฟอร์นิเจอร์ เครื่องใช้ไฟฟ้า และวัตถุที่เชื่อมต่อกัน Flythrough แสดงด้วยความเร็ว 2×
  • ข้อต่อฟิสิกส์

    ชิ้นส่วนที่เชื่อมต่อกันจะจำลองการเคลื่อนที่และโต้ตอบของประตู ฝาปิด และส่วนประกอบอื่นๆ

  • วัสดุฟิสิกส์

    คุณสมบัติทางกายภาพของพื้นผิวรองรับการสัมผัสและการเคลื่อนไหวภายในการจำลอง

  • ชนที่ถูกต้อง

    เรขาคณิตการชนทำให้วัตถุมีตัวตนทางกายภาพสำหรับการยักย้ายและการโต้ตอบกับสิ่งแวดล้อม

Semantic 3D สำหรับการโต้ตอบของหุ่นยนต์

แอสเซทมีข้อมูลเกี่ยวกับส่วนประกอบ พื้นผิวสัมผัส และตำแหน่งการจับ

  • การใช้เหตุผลเชิงความหมาย

    ตาข่ายที่แยกจากกันจะระบุส่วนประกอบที่มีความหมาย ดังนั้นที่จับ ประตู และตัวตู้จึงสามารถมีส่วนร่วมในงานได้

  • จุดหยิบจับที่กำหนดไว้

    Thrixel กำหนดตำแหน่งหยิบจับสำหรับการจัดการวัตถุด้วยหุ่นยนต์ พร้อมตรวจสอบการหยิบและยกในการจำลอง

  • เรขาคณิตการชนที่แม่นยำ

    Mesh Collider และสกีมา USD Physics อธิบายการติดต่อและข้อจำกัดที่ใช้ระหว่างการโต้ตอบ

จากภาพอ้างอิงไปจนถึงเนื้อหาที่ได้รับการตรวจสอบแล้ว

ขั้นตอนการสร้างใหม่จะเชื่อมโยงรูปลักษณ์ เรขาคณิต และพฤติกรรมทางกายภาพ

  1. 01

    อินพุตอ้างอิง

    เริ่มต้นด้วยภาพของวัตถุชิ้นเดียวหรือทั้งฉาก ข้อมูลอ้างอิงและขนาดอ้างอิงเป็นแนวทางในการสร้างใหม่

  2. 02

    การสร้างใหม่ 3 มิติ

    สร้างรูปทรงเรขาคณิต พื้นผิว PBR แยกเมชสำหรับส่วนความหมาย และฟิสิกส์ที่พร้อมสำหรับการจำลองในเนื้อหาที่มีโครงสร้าง

  3. 03

    การตรวจสอบ Isaac Sim

    ทดสอบและปรับเทียบแอสเซทในการจำลอง ตรวจสอบพฤติกรรมผ่านการสัมผัส การเชื่อมต่อ และการจัดการ

การตรวจสอบในการจำลอง

  • การหยุดนิ่ง
  • หล่น
  • การเลื่อน
  • การเคลื่อนไหวของข้อต่อทางกล
  • จับแล้วยก

ข้อมูลการจำลองสำหรับการเรียนรู้หุ่นยนต์

การเปลี่ยนแปลงเนื้อหาและฉาก

การเปลี่ยนแปลงขั้นตอนจะขยายสภาพแวดล้อมไปสู่การกำหนดค่าที่หลากหลายโดยอิงตามการกระจายในโลกแห่งความเป็นจริง ฉากที่มีโครงสร้างยังคงรักษาเนื้อหา ฟิสิกส์ และคำจำกัดความของงานที่จำเป็นสำหรับการจำลอง

วิถีการเรียนรู้แบบเลียนแบบ

วิถีหุ่นยนต์จับปฏิสัมพันธ์กับสิ่งแวดล้อม ส่วนความหมาย จุดจับหุ่นยนต์ที่กำหนด และฟิสิกส์ที่ได้รับการตรวจสอบแล้ว สนับสนุนงานการจัดการที่ใช้ในการสร้างข้อมูลเลียนแบบ

หารือเกี่ยวกับโครงการ Physical AI

แบ่งปันอินพุตอ้างอิง สภาพแวดล้อมเป้าหมาย และงานหุ่นยนต์ ทีมงานสามารถหารือเกี่ยวกับการสร้างใหม่ การสร้างฉาก และข้อกำหนดข้อมูลการจำลอง

ติดต่อ Thrixel