NEXUS: 地形適応型テレオペレーションのための知覚的全身体制御
NEXUS: Perceptive Whole-Body Control for Terrain-Adaptive Teleoperation
人間の動作指令と機体のセンサ情報を組み合わせ、異なる地形でもロボットが姿勢と接地を適応させて全身テレオペレーションを実現する制御フレームワークを提案。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Xiangyu Miao, Junsong Wu, Jiyuan Shi, Weiji Xie, Jinrui Han, Xingyi Wang, Weinan Zhang, Chenjia Bai, Xuelong Li
分類: cs.RO
原文アブストラクト
Whole-body teleoperation requires a humanoid robot to reproduce a human operator's behavior even when their terrains differ. This demands that the robot perceive local terrain and adapt its posture and contacts accordingly, rather than copy the operator's motion frame by frame. However, paired motion data linking the same behaviors across flat ground and different terrains remain scarce, limiting supervision for learning terrain-adaptive control. To enable whole-body teleoperation across mismatched terrains, we introduce NEXUS, a perceptive whole-body control framework that combines human motion commands with onboard sensory feedback. We first develop a scalable terrain-aware adaptation algorithm that efficiently generates high-quality motion pairs across motions and terrains without per-motion or per-terrain tuning. Using a paired motion corpus totaling nearly 1,000 hours, we train a perceptive whole-body controller through teacher-student learning to reproduce commanded behaviors across terrains. Experiments demonstrate efficient, scalable generation of high-quality motion data and show that NEXUS combines broad behavioral coverage with terrain adaptability and tracking fidelity, outperforming existing whole-body controllers on the evaluated benchmarks. Zero-shot real-world deployment enables real-time whole-body teleoperation on diverse unseen terrains, further validating the generalization of our method. Project website: https://nexus-humanoid.github.io/
関連論文
- 建設ロボティクスのための人間参加型制御パラダイム:VR誘導テレオペレーションから半自律デュアルアーム操作までテレオペレーション
- MABEL: テレオペレーションと学習のためのオープンな人間型移動双腕プラットフォームテレオペレーション
- DITTO-X: 巧みな操作と人間介入のための順方向・逆方向テレオペレーションテレオペレーション
- MATE: ヒューマノイド協調データ収集のためのマルチエージェント仮想テレオペレーションプラットフォームテレオペレーション
- Astrobee用テレオペ自由飛行マニピュレーションのための展開可能な4指ペイロードテレオペレーション
- XRoboToolKit-T:接触を伴う操作のための触覚センシングによる高安定・高精度テレオペレーションテレオペレーション
