Nachrichten

NVIDIA SOMA Retargeter passt menschliche Bewegung für humanoide Roboter an

Der NVIDIA SOMA Retargeter v0.2 ermöglicht Entwicklern, menschliche Bewegungen an humanoide Roboter anzupassen, indem er inverse Kinematik und Bewegungsbibliotheken nutzt.

NVIDIA SOMA Retargeter passt menschliche Bewegung für humanoide Roboter an

Übersetzter Artikel. Originalartikel lesen.

NVIDIA hat den Open-Source SOMA Retargeter eingeführt, ein Tool, das entwickelt wurde, um menschliche Bewegungen an die einzigartigen Proportionen und Gelenkstrukturen humanoider Roboter anzupassen. Basierend auf der gemeinsamen SOMA-Skelettdarstellung ermöglicht das Tool Entwicklern, Roboter zu konfigurieren, Bewegungsoutputs zu verfeinern und Bewegungsdaten für nachgelagerte Trainings- und Steuersysteme zu verarbeiten.

Wie der SOMA Retargeter funktioniert

Der SOMA Retargeter verarbeitet menschliche Bewegungsdaten, wie z.B. Biovision Hierarchy (BVH) Animationen, und wandelt sie in Roboter-Gelenktrajektorien um. Die Pipeline umfasst das Skalieren der Bewegungsziele, um mit den Proportionen des Roboters übereinzustimmen, das Lösen der inversen Kinematik (IK) mit NVIDIA Warp und das Anwenden von Nachbearbeitungsänderungen. Die Ausgabe ist eine CSV-Datei, die die Wurzelposition, die Orientierung und die Gelenkwinkel des Roboters für jedes Animationsframe enthält. Diese Daten können verwendet werden, um Bewegungsbibliotheken für Politiktraining-Workflows zu erstellen.

Quellen menschlicher Bewegung

Entwickler können menschliche Bewegung aus verschiedenen Plattformen beziehen, darunter:

  • Bewegungsfang-Datensätze: BONES-SEED liefert Daten für die menschliche Bewegungserfassung.
  • Video-Rekonstruktion: GEM-X rekonstruiert 3D menschliche Bewegung aus Videos unter Verwendung des SOMA-Körpermodells.
  • Generative Modelle: Tools wie Kimodo und ARDY generieren menschliche Bewegungssequenzen basierend auf Text- und Posenbeschränkungen, wobei sie Daten liefern, die mit dem SOMA-Skelett kompatibel sind.

Anpassung der Bewegung für unterschiedliche Roboter

Die Veröffentlichung des SOMA Retargeters v0.2 umfasst Konfigurationen und Referenzresultate für fünf humanoide Roboter: Unitree G1 , Unitree H2 , Booster T1 , AgiBot X2 Ultra und AgiBot A3T3 . Entwickler können diese Beispiele nutzen, um Retargeting-Workflows zu erkunden und ihre Ergebnisse mit den bereitgestellten Referenzen zu vergleichen. Zum Beispiel kann eine Vorwärtsgehmotion auf den Unitree G1 -Roboter umgekehrt werden, wobei die resultierende Animation neben der menschlichen Quellbewegung zur Inspektion und Verfeinerung dargestellt wird.

Werkzeuge zur Verfeinerung

Der Robot Configurator ermöglicht es Entwicklern, menschliche und Roboter-Referenzposen auszurichten, Skalierungen anzupassen und Skelette auf Roboterkörperteile zu kartieren. Darüber hinaus optimiert der IK-Gewichtsoptimierer Prioritäten für eine sanftere Bewegung, wenn Roboter nicht alle menschlichen Ziele gleichzeitig erreichen können. Diese Tools helfen, Bewegungsoutputs zu verfeinern und sicherzustellen, dass die Roboterbewegungen genau und realistisch sind.

Anwendungen und nächste Schritte

Retargetierte Trajektorien können in Simulations-Workflows integriert werden, wie z.B. SONIC und ProtoMotions, um Balance, Kontakt und Nachverfolgungsgenauigkeit zu bewerten. Entwickler werden ermutigt, das Repository des SOMA Retargeters zu erkunden, um Installationsanleitungen, interaktive Beispiele und Anleitungen zur Konfiguration neuer Roboter oder zur Verfeinerung bestehender Setups zu erhalten.

Weitere Artikel auf Deutsch · Finanzvergleiche und SEC-Quellen (Englisch)