뉴스
NVIDIA SOMA 리타게터가 인간의 움직임을 휴머노이드 로봇에 적응
NVIDIA SOMA 리타게터 v0.2는 개발자가 역운동학 및 모션 라이브러리를 활용하여 인간의 움직임을 휴머노이드 로봇에 적응할 수 있도록 합니다.
번역 기사입니다. 원문 기사 읽기.
NVIDIA는 인간의 움직임을 휴머노이드 로봇의 독특한 비율과 관절 구조에 적응시키기 위한 오픈 소스 SOMA 리타게터를 도입했습니다. 공유된 SOMA 스켈레톤 표현에 기반하여 구축된 이 도구는 개발자가 로봇을 구성하고, 모션 출력을 세분화하며, 다운스트림 훈련 및 제어 시스템을 위해 모션 데이터를 처리할 수 있게 합니다.
SOMA 리타게터 작동 방식
SOMA 리타게터는 Biovision Hierarchy (BVH) 애니메이션과 같은 인간의 움직임 데이터를 처리하고 이를 로봇 관절 궤도로 변환합니다. 이 파이프라인에는 로봇의 비율에 맞게 모션 타겟을 스케일링하고, NVIDIA Warp를 사용하여 역운동학(IK)을 해석하고, 후처리 수정 사항을 적용하는 것이 포함됩니다. 출력은 각 애니메이션 프레임에 대한 로봇의 루트 위치, 방향 및 관절 각도를 포함하는 CSV 파일입니다. 이 데이터는 정책 훈련 워크플로를 위한 모션 라이브러리를 구축하는 데 사용될 수 있습니다.
인간의 움직임 출처
개발자는 다양한 플랫폼에서 인간의 움직임을 추출할 수 있습니다:
- 모션 캡쳐 데이터셋: BONES-SEED는 인간의 모션 캡쳐 데이터를 제공합니다.
- 비디오 재구성: GEM-X는 SOMA 바디 모델을 사용하여 비디오에서 3D 인간의 움직임을 재구성합니다.
- 생성 모델: Kimodo 및 ARDY와 같은 도구는 텍스트 및 포즈 제약에 기반하여 인간의 움직임 시퀀스를 생성하고, SOMA 스켈레톤과 호환 가능한 데이터를 출력합니다.
다양한 로봇을 위한 움직임 적응
SOMA 리타게터 v0.2 릴리스에는 Unitree G1 , Unitree H2 , Booster T1 , AgiBot X2 Ultra 및 AgiBot A3T3의 다섯 가지 휴머노이드 로봇에 대한 구성 및 참조 결과가 포함되어 있습니다. 개발자는 이러한 예제를 사용하여 리타게팅 작업 흐름을 탐색하고 제공된 참조와 결과를 비교할 수 있습니다. 예를 들어, 전방 보행 움직임은 Unitree G1 로봇에 리타겟될 수 있으며, 결과 애니메이션은 검토 및 개선을 위해 인간 출처의 움직임과 함께 표시됩니다.
세분화를 위한 도구
로봇 구성기는 개발자가 인간 및 로봇의 참조 포즈를 정렬하고, 스케일을 조정하며, 스켈레톤을 로봇의 신체 부위에 매핑할 수 있게 해줍니다. 또한, IK 웨이트 최적화기는 로봇이 모든 인간 타겟을 동시에 맞출 수 없을 때 보다 부드러운 움직임을 위한 우선순위를 조정합니다. 이러한 도구는 모션 출력을 세분화하여 정확하고 현실적인 로봇 움직임을 보장합니다.
응용 프로그램 및 다음 단계
리타게팅된 궤적은 SONIC 및 ProtoMotions와 같은 시뮬레이션 작업 흐름에 통합되어 균형, 접촉 및 추적 정확도를 평가할 수 있습니다. 개발자는 SOMA 리타게터 리포지토리를 탐색하여 설치 지침, 대화형 예제 및 새로운 로봇을 구성하거나 기존 설정을 세분화하는 데 대한 가이드를 확인할 것이 권장됩니다.