TWIST: 遠隔操作による全身模倣システム

- ヒューマノイドロボットの全身テレオペレーションシステム - 名称は Teleoperated Whole-Body Imitation System (TWIST) - 人間の全身運動を模倣させることで全自由度を制御 - 単一の統合 neural network controller で実現 - whole-body manipulation、legged manipulation、locomotion、expressive movement をカバー - プロジェクトサイト: https://humanoid-teleop.github.io

- 従来のヒューマノイドテレオペレーションは coordinated whole-body behavior が不十分 - 多くは locomotion か manipulation の孤立したタスクに限定 - TWIST は全身運動模倣により versatile かつ coordinated な全身 motor skills を実現 - 単一の unified neural network controller で複数技能を達成 - 実世界ヒューマノイドでの全身協調動作を可能にした点が先行研究との差分

- 人間の motion capture data を humanoid robot へ retargeting し reference motion clips を生成 - robust・adaptive・responsive な whole-body controller を構築 - reinforcement learning と behavior cloning の組み合わせ (RL+BC) - 追従精度向上の工夫 - privileged future motion frames の活用 - real-world motion capture (MoCap) data の利用 - 単一の neural network controller に統合

- 実世界のヒューマノイドロボットで検証 - whole-body manipulation、legged manipulation、locomotion、expressive movement を達成 - 系統的な分析 (systematic analysis) を実施 - privileged future motion frames の導入効果を確認 - real-world MoCap data の利用が tracking accuracy を改善することを示す - 具体的な評価指標・被験者数・比較ベースラインは要旨からは不明

- 要旨からは不明 - 限界・失敗事例・安全性・汎化性に関する議論は明示されていない - 示唆される論点 - privileged future motion frames や real-world MoCap data への依存 - 単一 controller での多技能統合の汎化性 - 実世界 teleoperation の遅延・安定性

- 要旨で参照・比較されている個別研究は明示されていない - 関連手法として次を検討 - human motion retargeting を用いた humanoid teleoperation の先行研究 - reinforcement learning と behavior cloning を組み合わせた locomotion/manipulation controller - privileged learning (privileged future frames を用いる手法) - real-world motion capture (MoCap) を活用した模倣学習 - whole-body control と legged manipulation の研究