SimReady 3D คืออะไร?

SimReady หมายถึงอะไร?

SimReady หมายถึงพร้อมสำหรับการจำลอง เนื้อหา 3 มิติของ SimReady มีข้อมูลที่เครื่องจำลองสามารถใช้เพื่อตีความวัตถุและพฤติกรรมของวัตถุ ควบคู่ไปกับรูปทรงเรขาคณิตและวัสดุที่มองเห็นได้ ข้อมูลดังกล่าวอาจรวมถึงรูปร่างการชน มวล แรงเสียดทาน ป้ายความหมาย และส่วนประกอบที่เชื่อมต่อกัน ทั้งนี้ขึ้นอยู่กับงาน

SimReady ยังตั้งชื่อเฟรมเวิร์กข้อมูลจำเพาะที่ริเริ่มโดย NVIDIA และสร้างขึ้นบน OpenUSD โดยจะกำหนดความสามารถในการจำลองผ่านคุณสมบัติที่มีโครงสร้างและข้อมูลเมตา ข้อกำหนดที่เกี่ยวข้องขึ้นอยู่กับวัตถุประสงค์การใช้งานของแอสเซท วัตถุที่ใช้สำหรับการรับรู้ของกล้องและวัตถุที่ใช้สำหรับการจัดการหุ่นยนต์ต้องมีความสามารถที่แตกต่างกัน ภาพรวมข้อมูลจำเพาะ SimReady ของ NVIDIA อธิบายแนวทางนี้

แอสเซท SimReady แตกต่างจากโมเดล 3 มิติทั่วไปอย่างไร

โมเดลพื้นผิวอธิบายรูปร่างและลักษณะของวัตถุ เครื่องจำลองยังจำเป็นต้องรู้ว่าวัตถุนั้นใช้พื้นที่ ตอบสนองต่อการสัมผัส และการเคลื่อนไหวอย่างไร ตู้ครัวที่เหมือนจริงแสดงให้เห็นความแตกต่าง: ภาพที่เรนเดอร์อาจแสดงประตูและที่จับ ในขณะที่ปฏิสัมพันธ์ของหุ่นยนต์ต้องการให้ส่วนประกอบเหล่านั้นมีรูปทรงที่ใช้งานได้ รูปร่างการชนกัน และข้อต่อที่เหมาะสม

เนื้อหาที่พร้อมสำหรับเกมอาจมีการชนกันและภาพเคลื่อนไหวอยู่แล้ว แต่การตั้งค่านั้นได้รับการออกแบบมาสำหรับเกมใดเกมหนึ่งโดยเฉพาะ งานการเรียนรู้ด้วยหุ่นยนต์อาจต้องมีขนาดที่ปรับเทียบแล้ว พารามิเตอร์ทางกายภาพ คำอธิบายประกอบเชิงความหมาย และการตรวจสอบความถูกต้องกับการโต้ตอบที่ตั้งใจไว้ ความพร้อมได้รับการประเมินเทียบกับงานนั้นและรันไทม์การจำลอง

อะไรทำให้การจำลองแอสเซท 3 มิติพร้อม?

เรขาคณิต ขนาด และวัสดุ

ขนาด การวางแนว และโครงสร้างของวัตถุต้องตรงกับสภาพแวดล้อมที่ต้องการ มือจับหุ่นยนต์และด้ามจับจะต้องแสดงด้วยเครื่องชั่งที่เข้ากันได้ วัสดุและพื้นผิวที่มองเห็นได้สนับสนุนการสังเกตที่แสดงผล ในขณะที่คุณสมบัติของวัสดุทางกายภาพจะอธิบายพฤติกรรม เช่น การเสียดสีและการกระดอน คำแนะนำในการสร้างแบบจำลองของ NVIDIA เน้นที่ขนาดจริงและการสร้างแอสเซทที่สอดคล้องกัน

เรขาคณิตการชนและคุณสมบัติทางกายภาพ

รูปร่างการชนจะกำหนดว่าจุดสัมผัสจะเกิดขึ้นที่ใด มวลและความเฉื่อยส่งผลต่อวิธีที่วัตถุเคลื่อนที่ตอบสนองต่อแรง แรงเสียดทานส่งผลต่อการเลื่อนของพื้นผิว คุณสมบัติเหล่านี้จำเป็นต้องเหมาะสมกับวัตถุและงาน เรขาคณิตของตาข่ายและการชนกันที่มองเห็นได้อาจแตกต่างกัน เช่น เมื่อการแสดงการชนกันที่ง่ายกว่าช่วยเพิ่มประสิทธิภาพการจำลอง USD Physics มีสคีมาสำหรับการอธิบายคุณสมบัติทางกายภาพในฉาก OpenUSD

ป้ายความหมายและส่วนที่มีความหมาย

ข้อมูลเชิงความหมายระบุว่าวัตถุหรือส่วนประกอบแสดงถึงอะไร ป้ายต่างๆ เช่น ตู้ ประตู และที่จับ รองรับการตีความฉากและข้อมูลการฝึกอบรมที่มีคำอธิบายประกอบ รูปทรงของชิ้นส่วนที่แยกจากกันช่วยให้สามารถเลือกและจัดการส่วนประกอบเหล่านั้นแยกกันได้ การติดป้ายกำกับความหมาย ยังรองรับการระบุวัตถุในรูปภาพที่แสดงผลสำหรับแมชชีนเลิร์นนิงอีกด้วย

ข้อต่อเฉพาะงานและจุดยึด

งานเปิดตู้จำเป็นต้องมีข้อต่อประตูที่มีแกนและขีดจำกัดการเคลื่อนไหวที่เหมาะสม งานหยิบและวางต้องใช้พื้นผิวสัมผัสที่เข้าถึงได้และตำแหน่งที่จับที่เป็นประโยชน์ สิ่งเหล่านี้คือส่วนเพิ่มเติมเฉพาะงาน: ออบเจ็กต์พื้นหลังแบบคงที่ไม่ต้องการความสามารถทุกอย่างที่จำเป็นสำหรับแอสเซทการจัดการที่เชื่อมต่อกัน

เหตุใดแอสเซท SimReady จึงมีความสำคัญสำหรับ AI ทางกายภาพ

ระบบ Physical AI รับรู้และดำเนินการในสภาพแวดล้อมทางกายภาพ การจำลองช่วยให้ทีมพัฒนาหุ่นยนต์มีสถานที่ในการฝึกปฏิบัติภารกิจ เปลี่ยนแปลงเงื่อนไข และรวบรวมข้อมูล คุณภาพของแอสเซทส่งผลต่อการทดลองเหล่านั้น: ตัวชนที่ไม่ถูกต้องสามารถบล็อกการจับที่ถูกต้องได้ และตัวจับที่ปรับขนาดไม่ถูกต้องสามารถเปลี่ยนว่าจะเข้าถึงงานได้หรือไม่

แอสเซทที่มีโครงสร้างยังทำให้รูปแบบต่างๆ มีประโยชน์มากขึ้นอีกด้วย ฉากสามารถเปลี่ยนการวางวัตถุ ขนาด หรือคุณสมบัติของวัสดุในขณะที่ยังคงรักษาข้อมูลที่จำเป็นในการรันงาน รูปแบบเหล่านี้สนับสนุนเวิร์กโฟลว์การเรียนรู้หุ่นยนต์และการประเมินผล แม้ว่าประสิทธิภาพในการจำลองยังคงต้องมีการประเมินโดยเทียบกับวัตถุประสงค์ในโลกแห่งความเป็นจริง

คุณจะตรวจสอบแอสเซท SimReady ใน Isaac Sim ได้อย่างไร

การตรวจสอบรวมถึงการตรวจสอบโครงสร้างของแอสเซทและการสังเกตพฤติกรรมในตัวจำลองเป้าหมาย เวิร์กโฟลว์ AI ทางกายภาพของ Thrixel ใช้ Isaac Sim สำหรับการทดสอบ เช่น:

• การหยุดนิ่ง: วางวัตถุบนพื้นรองรับที่กำหนด และตรวจสอบว่าวัตถุหยุดนิ่งตามที่คาดไว้หรือไม่
• ปล่อย: ตรวจสอบการตอบสนองและความเสถียรของการสัมผัสเมื่อวัตถุตกลง
• การเลื่อน: ตรวจสอบปฏิสัมพันธ์ระหว่างพื้นผิวขณะเคลื่อนที่
• การเคลื่อนไหวของข้อต่อทางกล: ตรวจสอบแกน ระยะ และการเคลื่อนตัวของประตู ฝาปิด หรือชิ้นส่วนที่ข้อต่ออื่นๆ
• จับและยก: ทดสอบว่าหุ่นยนต์สามารถติดต่อ จับ และยกวัตถุที่ต้องการได้หรือไม่

การทดสอบควรสะท้อนถึงงานที่ตั้งใจไว้ ประตูที่เปิดอย่างถูกต้องโดยแยกออกจากกันยังต้องมีการตรวจสอบภายในตู้ โดยมีวัตถุรอบๆ และมีหุ่นยนต์อยู่ด้วย การตรวจสอบแอสเซทและการตรวจสอบฉากระบุแหล่งที่มาของความล้มเหลวที่แตกต่างกัน

AI สามารถสร้างแอสเซท SimReady และฉากทั้งหมดได้หรือไม่

AI สามารถสร้างรูปทรงเรขาคณิตและรูปลักษณ์จากข้อความแจ้งหรือภาพอ้างอิง จากนั้นสนับสนุนการเตรียมชิ้นส่วน ฟิสิกส์ และข้อมูลงาน เครื่องสร้างโมเดล AI 3D ของ Thrixel ให้เนื้อหาที่แก้ไขได้สำหรับกระบวนการนี้ ขั้นตอนการทำงานที่สมบูรณ์ยังรวบรวมสภาพแวดล้อมและตรวจสอบพฤติกรรมในการจำลองอีกด้วย คู่มือ AI เจนเนอเรชั่น 3 มิติ อธิบายขั้นตอนการทำงานในการสร้างโมเดลที่สำคัญ

Thrixel สำหรับ AI ทางกายภาพ ครอบคลุมถึงการสร้างแฝดดิจิทัลขึ้นใหม่จากภาพถ่ายและวิดีโอ การสร้างฉากที่มีโครงสร้าง ส่วนความหมาย จุดยึดหุ่นยนต์ที่กำหนด และการตรวจสอบความถูกต้องของการจำลอง ขั้นตอนการทำงานสร้างตาข่ายสามเหลี่ยมด้วยวัสดุ PBR และเอาต์พุตฉาก USDA ซึ่งมีข้อมูลการจำลอง นอกจากนี้ยังรองรับการแปรผันของเนื้อหาและฉาก และวิถีหุ่นยนต์สำหรับการเรียนรู้แบบเลียนแบบ

สำหรับการสร้างโลกเชิงโต้ตอบด้วยเอเจนต์การเขียนโปรแกรม AI Build World จะเชื่อมต่อการสร้างเนื้อหากับการประกอบฉากและการตรวจสอบซ้ำ โปรเจ็กต์ Physical AI เพิ่มข้อกำหนด เช่น งานหุ่นยนต์ การสอบเทียบทางฟิสิกส์ และการตรวจสอบเฉพาะเครื่องจำลอง การอภิปรายโครงการ AI ทางกายภาพของ Thrixel เริ่มต้นด้วยข้อกำหนดเหล่านั้นและอินพุตอ้างอิงที่มีอยู่

คำถามทั่วไปเกี่ยวกับเนื้อหา 3D SimReady

ไฟล์ USD ทุกไฟล์เป็นเนื้อหา SimReady หรือไม่

ไม่ OpenUSD สามารถอธิบายฉากได้โดยไม่ต้องมีความสามารถในการจำลองที่จำเป็นสำหรับงาน ไฟล์ต้องการคุณสมบัติที่มีโครงสร้าง ความหมาย และการตรวจสอบที่เหมาะสม SimReady FAQ ของ NVIDIA อธิบายว่าทำไมการจัดเก็บข้อมูลใน USD เพียงอย่างเดียวจึงไม่ทำให้เกิดความพร้อมในการจำลอง

แอสเซท SimReady เหมือนกับ Digital Twins หรือไม่

ข้อกำหนดนี้อธิบายแง่มุมต่างๆ ของเนื้อหา แฝดดิจิทัลแสดงถึงวัตถุหรือสภาพแวดล้อมในโลกแห่งความเป็นจริงโดยเฉพาะ ความพร้อมในการจำลองอธิบายถึงความสามารถที่จำเป็นในการใช้การแสดงนั้นในการจำลอง สามารถเตรียมห้องครัวที่สร้างขึ้นใหม่สำหรับการจำลองได้ ในขณะที่ห้องครัว SimReady ที่สร้างขึ้นไม่จำเป็นต้องตรงกับห้องครัวจริงแห่งใดแห่งหนึ่ง

โมเดล 3 มิติที่มีอยู่สามารถพร้อมสำหรับการจำลองได้หรือไม่

ใช่ ตาข่ายที่มีอยู่อาจเป็นจุดเริ่มต้นได้ การเตรียมการอาจเกี่ยวข้องกับการแก้ไขมาตราส่วน การแยกชิ้นส่วนที่เคลื่อนไหว การสร้างเรขาคณิตการชนกันและคุณสมบัติทางกายภาพ การเพิ่มป้ายความหมาย และการทดสอบผลลัพธ์ในเครื่องจำลองเป้าหมาย งานขึ้นอยู่กับโครงสร้างของแบบจำลองและงานที่ตั้งใจไว้

ทรัพย์สิน SimReady ทั้งหมดจำเป็นต้องมีข้อต่อหรือจุดยึดหรือไม่?

ไม่จำเป็น ความสามารถเหล่านี้ขึ้นอยู่กับลักษณะปฏิสัมพันธ์ พื้นต้องมีรูปทรงและพฤติกรรมการสัมผัสที่เหมาะสม ลิ้นชักที่เปิดได้ต้องมีข้อต่อ ส่วนวัตถุที่ต้องให้หุ่นยนต์หยิบจับต้องมีการตั้งค่ารองรับการจัดการวัตถุ ข้อกำหนดของการจำลองเป็นตัวกำหนดสิ่งที่ต้องสร้างและตรวจสอบ