Notícias
O Retargeter SOMA da NVIDIA Adapta o Movimento Humano para Robôs Humanoides
O Retargeter SOMA da NVIDIA v0.2 permite que os desenvolvedores adaptem o movimento humano para robôs humanoides, aproveitando a cinemática inversa e bibliotecas de movimento.
Artigo traduzido. Ler o artigo original.
A NVIDIA apresentou o Retargeter SOMA de código aberto, uma ferramenta projetada para adaptar o movimento humano às proporções e estruturas articulares únicas dos robôs humanoides. Construída sobre a representação esquelética compartilhada SOMA, a ferramenta permite que os desenvolvedores configurem robôs, refinem as saídas de movimento e processem dados de movimento para sistemas de treinamento e controle a montante.
Como Funciona o Retargeter SOMA
O Retargeter SOMA processa dados de movimento humano, como animações em Biovision Hierarchy (BVH), e os converte em trajetórias de articulações de robô. O pipeline inclui o escalonamento de alvos de movimento para corresponder às proporções do robô, a resolução da cinemática inversa (IK) usando a NVIDIA Warp, e a aplicação de correções de pós-processamento. A saída é um arquivo CSV contendo a posição raiz do robô, orientação e ângulos das articulações para cada quadro de animação. Esses dados podem ser usados para construir bibliotecas de movimento para fluxos de trabalho de treinamento de políticas.
Fontes de Movimento Humano
Os desenvolvedores podem obter movimento humano de várias plataformas, incluindo:
- Conjuntos de dados de captura de movimento: O BONES-SEED fornece dados de captura de movimento humano.
- Reconstrução de vídeo: O GEM-X reconstrói movimento humano 3D a partir de vídeo usando o modelo corporal SOMA.
- Modelos generativos: Ferramentas como Kimodo e ARDY geram sequências de movimento humano com base em texto e restrições de pose, produzindo dados compatíveis com o esqueleto SOMA.
Adaptando Movimento para Diferentes Robôs
A versão v0.2 do Retargeter SOMA inclui configurações e resultados de referência para cinco robôs humanoides: Unitree G1 , Unitree H2 , Booster T1 , AgiBot X2 Ultra e AgiBot A3T3 . Os desenvolvedores podem usar esses exemplos para explorar fluxos de trabalho de retargeting e comparar seus resultados com as referências fornecidas. Por exemplo, um movimento de caminhada para frente pode ser redirecionado para o robô Unitree G1 , com a animação resultante exibida ao lado do movimento humano de origem para inspeção e refinamento.
Ferramentas para Refinamento
O Configurador de Robôs permite que os desenvolvedores alinhem poses de referência humanas e robóticas, ajustem escalonamento e mapeiem esqueletos para as partes do corpo do robô. Além disso, o otimizador de peso da IK ajusta prioridades para um movimento mais suave quando os robôs não conseguem corresponder a todos os alvos humanos simultaneamente. Essas ferramentas ajudam a refinar as saídas de movimento, garantindo movimentos de robô precisos e realistas.
Aplicações e Próximos Passos
As trajetórias retargetadas podem ser integradas em fluxos de trabalho de simulação, como SONIC e ProtoMotions, para avaliar equilíbrio, contato e precisão de rastreamento. Os desenvolvedores são incentivados a explorar o repositório do Retargeter SOMA para instruções de instalação, exemplos interativos e guias para configurar novos robôs ou refinar configurações existentes.
Mais artigos em português · Comparações financeiras e fontes da SEC (inglês)