SimReady 3D là gì?

SimReady có nghĩa là gì?

SimReady có nghĩa là sẵn sàng mô phỏng. Nội dung 3D SimReady chứa thông tin mà trình mô phỏng có thể sử dụng để diễn giải đối tượng và hành vi của đối tượng, cùng với hình học và vật liệu hiển thị của đối tượng. Tùy thuộc vào nhiệm vụ, thông tin đó có thể bao gồm hình dạng va chạm, khối lượng, ma sát, nhãn ngữ nghĩa và các thành phần khớp nối.

SimReady cũng đặt tên cho khung đặc tả do NVIDIA khởi xướng và được xây dựng trên OpenUSD. Nó xác định khả năng mô phỏng thông qua các thuộc tính và siêu dữ liệu có cấu trúc. Các yêu cầu áp dụng tùy thuộc vào mục đích sử dụng dự định của tài sản; một vật thể được sử dụng để nhận biết máy ảnh và một vật thể được sử dụng để thao tác với robot cần những khả năng khác nhau. Tổng quan về thông số kỹ thuật SimReady của NVIDIA mô tả phương pháp này.

Nội dung SimReady khác với mô hình 3D thông thường như thế nào?

Một mô hình kết cấu mô tả hình dạng và diện mạo của một đối tượng. Trình mô phỏng cũng cần biết vật thể đó chiếm không gian như thế nào, phản ứng khi tiếp xúc và di chuyển như thế nào. Một chiếc tủ bếp thực tế minh họa sự khác biệt: hình ảnh được hiển thị của nó có thể hiển thị một cánh cửa và tay cầm, trong khi sự tương tác của robot yêu cầu các bộ phận đó phải có hình dạng có thể sử dụng được, hình dạng va chạm và khớp nối thích hợp.

Nội dung sẵn sàng cho trò chơi có thể đã bao gồm xung đột và hoạt ảnh nhưng thiết lập của nó được thiết kế cho một trò chơi cụ thể. Nhiệm vụ học tập của robot có thể yêu cầu các kích thước, thông số vật lý, chú thích ngữ nghĩa và xác thực dựa trên tương tác dự định. Sự sẵn sàng được đánh giá dựa trên nhiệm vụ đó và thời gian chạy mô phỏng.

Điều gì làm cho mô phỏng nội dung 3D sẵn sàng?

Hình học, tỷ lệ và vật liệu

Kích thước, hướng và cấu trúc đối tượng cần phải phù hợp với môi trường dự định. Dụng cụ kẹp robot và tay cầm phải được thể hiện ở các tỷ lệ tương thích. Các vật liệu và kết cấu trực quan hỗ trợ các quan sát được hiển thị, trong khi các đặc tính vật lý của vật liệu mô tả hành vi như ma sát và lực nảy. hướng dẫn lập mô hình của NVIDIA nhấn mạnh vào quy mô thực tế và việc xây dựng tài sản nhất quán.

Hình học va chạm và tính chất vật lý

Hình dạng va chạm xác định nơi xảy ra tiếp xúc. Khối lượng và quán tính ảnh hưởng đến cách một vật chuyển động phản ứng với lực; ma sát ảnh hưởng đến việc bề mặt có trượt hay không. Các thuộc tính này cần phải phù hợp với đối tượng, nhiệm vụ. Lưới nhìn thấy được và hình học va chạm có thể khác nhau, ví dụ khi biểu diễn va chạm đơn giản hơn sẽ cải thiện hiệu suất mô phỏng. USD Physics cung cấp các lược đồ để mô tả các thuộc tính vật lý trong cảnh OpenUSD.

Nhãn ngữ nghĩa và các phần có ý nghĩa

Thông tin ngữ nghĩa xác định những gì một đối tượng hoặc thành phần đại diện. Các nhãn như tủ, cửa và tay cầm hỗ trợ giải thích cảnh và dữ liệu huấn luyện có chú thích. Hình dạng bộ phận riêng biệt cho phép các thành phần đó được chọn và thao tác riêng lẻ. Gắn nhãn ngữ nghĩa cũng có thể hỗ trợ xác định các đối tượng trong hình ảnh được hiển thị cho máy học.

Các khớp và điểm nắm bắt theo nhiệm vụ cụ thể

Công việc mở tủ cần có khớp cửa có trục phù hợp và giới hạn chuyển động. Nhiệm vụ chọn và đặt cần có các bề mặt tiếp xúc có thể tiếp cận được và các vị trí cầm nắm hữu ích. Đây là những bổ sung dành riêng cho nhiệm vụ: một đối tượng nền tĩnh không cần mọi khả năng được yêu cầu bởi nội dung thao tác có khớp nối.

Tại sao nội dung SimReady lại quan trọng đối với AI vật lý?

Hệ thống Physical AI nhận thức và hoạt động trong môi trường vật lý. Mô phỏng cung cấp cho các nhóm phát triển robot một nơi để thực hiện các nhiệm vụ, thay đổi điều kiện và thu thập dữ liệu. Chất lượng nội dung ảnh hưởng đến các thử nghiệm đó: trình xử lý không chính xác có thể chặn phần nắm bắt hợp lệ và phần điều khiển được chia tỷ lệ không chính xác có thể thay đổi liệu có thể truy cập được nhiệm vụ hay không.

Nội dung có cấu trúc cũng làm cho sự thay đổi trở nên hữu ích hơn. Một cảnh có thể thay đổi vị trí, kích thước hoặc thuộc tính vật liệu của đối tượng trong khi vẫn giữ lại thông tin cần thiết để thực hiện tác vụ. Các biến thể này hỗ trợ quy trình đánh giá và học tập của robot, mặc dù hiệu suất trong mô phỏng vẫn cần được đánh giá theo mục tiêu trong thế giới thực.

Làm cách nào để xác thực nội dung SimReady trong Isaac Sim?

Xác thực bao gồm kiểm tra cấu trúc của nội dung và quan sát hành vi của nó trong trình mô phỏng mục tiêu. Quy trình làm việc AI vật lý của Thrixel sử dụng Isaac Sim cho các thử nghiệm như:

• Ổn định: đặt vật thể lên bề mặt đỡ dự kiến và kiểm tra xem nó có dừng lại ổn định như mong đợi không.
• Thả: kiểm tra phản hồi tiếp xúc và độ ổn định khi vật tiếp đất.
• Trượt: kiểm tra cách các bề mặt tương tác khi chuyển động.
• Chuyển động của các khớp cơ khí: kiểm tra trục, phạm vi và chuyển động của cửa, nắp hoặc các bộ phận có khớp nối khác.
• Nắm và nâng: kiểm tra xem robot có thể tiếp xúc, giữ và nâng vật thể mong muốn hay không.

Các bài kiểm tra phải phản ánh nhiệm vụ dự định. Một cánh cửa mở cách ly đúng cách cũng cần kiểm tra bên trong tủ của nó, với các đồ vật xung quanh và sự hiện diện của robot. Xác thực tài sản và xác thực hiện trường giải quyết các nguồn lỗi khác nhau.

AI có thể tạo nội dung SimReady và toàn bộ cảnh không?

AI có thể tạo ra hình học và diện mạo từ lời nhắc hoặc hình ảnh tham chiếu, sau đó hỗ trợ việc chuẩn bị các bộ phận, vật lý và thông tin nhiệm vụ. Trình tạo mô hình AI 3D của Thrixel cung cấp nội dung có thể chỉnh sửa cho quy trình này. Một quy trình làm việc hoàn chỉnh cũng lắp ráp môi trường và kiểm tra hành vi của nó trong mô phỏng. Hướng dẫn về AI tạo mô hình 3D giải thích các quy trình tạo mô hình cơ bản.

Thrixel dành cho AI vật lý bao gồm việc tái tạo bản sao kỹ thuật số từ ảnh và video, tạo cảnh có cấu trúc, các phần ngữ nghĩa, các điểm nắm bắt robot được xác định và xác thực mô phỏng. Quy trình làm việc tạo ra các lưới tam giác bằng vật liệu PBR và đầu ra cảnh USDA mang thông tin mô phỏng. Nó cũng hỗ trợ sự thay đổi nội dung và cảnh cũng như quỹ đạo của robot để học tập bắt chước.

Để tạo thế giới tương tác bằng tác nhân lập trình AI, Build World kết nối việc tạo nội dung với việc lắp ráp cảnh và kiểm tra lặp lại. Các dự án Physical AI bổ sung các yêu cầu như nhiệm vụ robot, hiệu chỉnh vật lý và xác thực dành riêng cho trình mô phỏng. Thảo luận về dự án AI vật lý của Thrixel bắt đầu với những yêu cầu đó và thông tin tham khảo đầu vào có sẵn.

Các câu hỏi thường gặp về nội dung 3D SimReady

Có phải mọi tệp USD đều là nội dung SimReady không?

Không. OpenUSD có thể mô tả một cảnh mà không chứa các khả năng mô phỏng mà tác vụ yêu cầu. Tệp cần có các thuộc tính, ngữ nghĩa và xác thực có cấu trúc phù hợp. Câu hỏi thường gặp về SimReady của NVIDIA giải thích lý do tại sao chỉ lưu trữ dữ liệu trong USD không đảm bảo tính sẵn sàng cho mô phỏng.

Tài sản SimReady có giống như bản sao kỹ thuật số không?

Các thuật ngữ mô tả các khía cạnh khác nhau của một tài sản. Bản song sinh kỹ thuật số đại diện cho một đối tượng hoặc môi trường trong thế giới thực cụ thể. Tính sẵn sàng của mô phỏng mô tả các khả năng cần thiết để sử dụng biểu diễn đó trong mô phỏng. Một nhà bếp được xây dựng lại có thể được chuẩn bị để mô phỏng, trong khi một nhà bếp SimReady được tạo ra không cần phải tương ứng với một nhà bếp thực tế cụ thể.

Mô hình 3D hiện có có thể sẵn sàng cho mô phỏng không?

Vâng. Một lưới hiện có có thể là điểm khởi đầu. Việc chuẩn bị có thể bao gồm việc điều chỉnh tỷ lệ, tách các bộ phận chuyển động, tạo ra các đặc tính vật lý và hình học va chạm, thêm các nhãn ngữ nghĩa và kiểm tra kết quả trong trình mô phỏng mục tiêu. Công việc phụ thuộc vào cấu trúc của mô hình và nhiệm vụ dự định.

Tất cả tài sản SimReady có cần khớp nối hoặc điểm nắm không?

Không. Những khả năng đó phụ thuộc vào sự tương tác. Sàn cần có hình dạng và trạng thái tiếp xúc phù hợp; một ngăn kéo mở cần có khớp nối; một đối tượng nhằm mục đích nắm bắt cần thiết lập thao tác. Các yêu cầu mô phỏng liên quan xác định những gì phải được soạn thảo và kiểm tra.