言語誘導型衝突回避を備えた安全な両腕テレオペレーション
Safe Bimanual Teleoperation with Language-Guided Collision Avoidance
VRコントローラと音声指示を組み合わせ、話しかけた物体を3D障害物メッシュ化して全身制御で衝突を防ぐ両腕テレオペレーションシステムを提案した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Dionis Totsila, Clemente Donoso, Enrico Mingo Hoffman, Jean-Baptiste Mouret, Serena Ivaldi
分類: cs.RO
原文アブストラクト
Teleoperating precise bimanual manipulations in cluttered environments is challenging for operators, who often struggle with limited spatial perception and difficulty estimating distances between target objects, the robot's body, obstacles, and the surrounding environment. To address these challenges, local robot perception and control should assist the operator during teleoperation. In this work, we introduce a safe teleoperation system that enhances operator control by preventing collisions in cluttered environments through the combination of immersive VR control and voice-activated collision avoidance. Using HTC Vive controllers, operators directly control a bimanual mobile manipulator, while spoken commands such as "avoid the yellow tool" trigger visual grounding and segmentation to build 3D obstacle meshes. These meshes are integrated into a whole-body controller to actively prevent collisions during teleoperation. Experiments in static, cluttered scenes demonstrate that our system significantly improves operational safety without compromising task efficiency.
関連論文
- 建設ロボティクスのための人間参加型制御パラダイム:VR誘導テレオペレーションから半自律デュアルアーム操作までテレオペレーション
- MABEL: テレオペレーションと学習のためのオープンな人間型移動双腕プラットフォームテレオペレーション
- DITTO-X: 巧みな操作と人間介入のための順方向・逆方向テレオペレーションテレオペレーション
- NEXUS: 地形適応型テレオペレーションのための知覚的全身体制御テレオペレーション
- MATE: ヒューマノイド協調データ収集のためのマルチエージェント仮想テレオペレーションプラットフォームテレオペレーション
- Astrobee用テレオペ自由飛行マニピュレーションのための展開可能な4指ペイロードテレオペレーション
