Thrixel para IA física

Mundos prontos para simulação para aprendizagem de robôs

Transforme entradas e especificações do mundo real em recursos 3D estruturados, ambientes completos e dados de simulação para IA física.

Interação de robô em uma cozinha gerada por Thrixel. Demonstração mostrada na velocidade 3×.

Criação 3D para IA Física

Reconstrua um ambiente existente ou gere uma cena estruturada a partir de uma especificação.

A partir de entradas do mundo real

Reconstrução de gêmeos digitais

Fotos e vídeos tornam-se recursos 3D e ambientes multiobjetos com malhas triangulares, materiais PBR e partes semânticas separadas. A saída do USDA traz a estrutura e a física necessárias para fluxos de trabalho de simulação.

De uma especificação de cena

Dados de simulação em escala

Gere cenas totalmente estruturadas com recursos prontos para simulação e definições de tarefas correspondentes. Varie recursos e layouts usando distribuições do mundo real e produza trajetórias de robôs para aprendizagem por imitação.

Do prompt à cena completa do SimReady

Um ambiente com objetos articulados, materiais físicos e geometria de colisão, pronto para interação em simulação. O que é o SimReady 3D?

Ambiente de cozinha completo com móveis, eletrodomésticos e objetos articulados. Flythrough mostrado em velocidade 2×.
  • Articulações de física

    As peças articuladas modelam como portas, tampas e outros componentes se movem e interagem.

  • Materiais de física

    As propriedades físicas da superfície suportam contato e movimento dentro da simulação.

  • Colisores válidos

    A geometria de colisão dá aos objetos uma presença física para manipulação e interação com o ambiente.

3D semântico para interação com robôs

Os recursos carregam informações sobre seus componentes, superfícies de contato e locais de alcance.

  • Raciocínio da parte semântica

    Malhas separadas identificam componentes significativos, de modo que uma maçaneta, uma porta e um corpo de gabinete podem participar de uma tarefa.

  • Pontos de compreensão de autoria

    Os autores de Thrixel captam locais para manipulação de robôs, com verificações de agarrar e levantar em simulação.

  • Geometria de colisão precisa

    Mesh colliders e esquemas USD Physics descrevem os contatos e restrições usados durante a interação.

Das imagens de referência aos recursos validados

O fluxo de trabalho de reconstrução conecta aparência, geometria e comportamento físico.

  1. 01

    Entradas de referência

    Comece com imagens de um único objeto ou de uma cena inteira. As entradas e dimensões de referência orientam a reconstrução.

  2. 02

    Reconstrução 3D

    Crie geometria, texturas PBR, malhas separadas para partes semânticas e física pronta para simulação em um recurso estruturado.

  3. 03

    Validação de Isaac Sim

    Testar e calibrar o recurso em simulação, verificando seu comportamento através de contato, articulação e manipulação.

Verificações na simulação

  • Acordo
  • Queda
  • Diapositivo
  • Articulação articular
  • Agarre e levante

Dados de simulação para aprendizagem de robôs

Variação de recursos e cenas

A variação processual expande um ambiente em múltiplas configurações baseadas em distribuições do mundo real. As cenas estruturadas retêm os recursos, a física e as definições de tarefas necessárias para a simulação.

Trajetórias de aprendizagem por imitação

As trajetórias do robô capturam interações com o ambiente. Partes semânticas, pontos de compreensão de autoria e física validada apoiam as tarefas de manipulação usadas para produzir dados de imitação.

Discuta um projeto de IA física

Compartilhe as entradas de referência, o ambiente de destino e as tarefas do robô. A equipe pode discutir requisitos de reconstrução, geração de cena e dados de simulação.

Entre em contato com Thrixel