Thrixel cho Physical AI

Thế giới sẵn sàng mô phỏng cho việc học tập của robot

Biến thông số đầu vào và thông số kỹ thuật trong thế giới thực thành tài sản 3D có cấu trúc, môi trường hoàn chỉnh và dữ liệu mô phỏng cho AI vật lý.

Tương tác robot trong nhà bếp do Thrixel tạo ra. Trình diễn được hiển thị ở tốc độ 3 ×.

Tạo 3D cho Physical AI

Xây dựng lại môi trường hiện có hoặc tạo cảnh có cấu trúc từ thông số kỹ thuật.

Từ đầu vào trong thế giới thực

Tái tạo bản sao kỹ thuật số

Ảnh và video trở thành nội dung 3D và môi trường đa đối tượng với lưới tam giác, vật liệu PBR và các phần ngữ nghĩa riêng biệt. Đầu ra USDA mang cấu trúc và vật lý cần thiết cho quy trình mô phỏng.

Từ đặc tả cảnh

Dữ liệu mô phỏng ở quy mô

Tạo các cảnh có cấu trúc đầy đủ với nội dung sẵn sàng cho mô phỏng và định nghĩa nhiệm vụ tương ứng. Thay đổi nội dung và bố cục bằng cách sử dụng các bản phân phối trong thế giới thực và tạo ra quỹ đạo của robot để học tập bắt chước.

Từ lời nhắc đến cảnh SimReady hoàn chỉnh

Một môi trường với các vật thể được khớp nối, vật liệu vật lý và hình học va chạm, sẵn sàng cho sự tương tác trong mô phỏng. SimReady 3D là gì?

Một môi trường nhà bếp hoàn chỉnh với đồ nội thất, thiết bị và đồ vật có khớp nối. Flythrough được hiển thị ở tốc độ 2×.
  • khớp vật lý

    Các bộ phận khớp nối mô phỏng cách cửa, nắp và các bộ phận khác di chuyển và tương tác.

  • Vật liệu vật lý

    Các đặc tính bề mặt vật lý hỗ trợ sự tiếp xúc và chuyển động trong mô phỏng.

  • Hình dạng va chạm hợp lệ

    Hình học va chạm mang lại cho các đối tượng sự hiện diện vật lý để thao tác và tương tác với môi trường.

3D ngữ nghĩa cho tương tác robot

Tài sản mang thông tin về các thành phần, bề mặt tiếp xúc và vị trí cầm nắm của chúng.

  • Lý luận phần ngữ nghĩa

    Các mắt lưới riêng biệt xác định các thành phần có ý nghĩa, do đó, mỗi tay cầm, cửa và thân tủ có thể tham gia vào một nhiệm vụ.

  • Các điểm cầm nắm được xác định

    Thrixel xác định các điểm cầm nắm để robot thao tác với vật thể, đồng thời kiểm tra việc cầm và nâng trong mô phỏng.

  • Hình học va chạm chính xác

    Máy va chạm dạng lưới và lược đồ USD Physics mô tả các liên hệ và ràng buộc được sử dụng trong quá trình tương tác.

Từ hình ảnh tham chiếu đến nội dung đã được xác thực

Quy trình tái thiết kết nối hình thức, hình học và hành vi vật lý.

  1. 01

    Đầu vào tham chiếu

    Bắt đầu bằng hình ảnh của một vật thể hoặc toàn bộ khung cảnh. Đầu vào và kích thước tham chiếu hướng dẫn việc tái thiết.

  2. 02

    tái tạo 3D

    Tạo hình học, kết cấu PBR, các mắt lưới riêng biệt cho các phần ngữ nghĩa và vật lý sẵn sàng mô phỏng trong nội dung có cấu trúc.

  3. 03

    Xác thực Isaac Sim

    Kiểm tra và hiệu chỉnh nội dung trong mô phỏng, kiểm tra hành vi của nó thông qua tiếp xúc, khớp nối và thao tác.

Kiểm tra trong mô phỏng

  • Ổn định
  • Thả
  • Chuyển động trượt
  • Chuyển động của các khớp cơ học
  • Nắm và nâng

Dữ liệu mô phỏng cho việc học robot

Biến thể nội dung và cảnh

Biến thể thủ tục mở rộng môi trường thành nhiều cấu hình dựa trên các bản phân phối trong thế giới thực. Các cảnh có cấu trúc giữ lại các nội dung, vật lý và định nghĩa nhiệm vụ cần thiết cho mô phỏng.

Quỹ đạo học tập bắt chước

Quỹ đạo của robot ghi lại các tương tác với môi trường. Các bộ phận ngữ nghĩa, các điểm nắm bắt robot được xác định và vật lý được xác thực hỗ trợ các tác vụ thao tác được sử dụng để tạo ra dữ liệu mô phỏng.

Thảo luận về Dự án Physical AI

Chia sẻ đầu vào tham chiếu, môi trường mục tiêu và nhiệm vụ của robot. Nhóm có thể thảo luận về các yêu cầu về tái thiết, tạo cảnh và dữ liệu mô phỏng.

Liên hệ Thrixel