CollaBot: 視覚言語ガイドによる同時協調マニピュレーション
CollaBot: Vision-Language Guided Simultaneous Collaborative Manipulation
視覚言語モデルを活用し、複数ロボットが大型物体を協調して把持・運搬するための汎用フレームワークを提案。実環境を含む実験で従来手法を上回る72%の成功率を達成した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Kun Song, Gaoming Chen, Shentao Ma, Ninglong Jin, Guangbao Zhao, Mingyu Ding, Zhenhua Xiong, Jia Pan
分類: cs.RO
原文アブストラクト
One central goal of robotics is to enable robots to interact with the physical world. Traditional manipulation studies primarily focus on single robots and relatively small objects. However, factory and domestic environments often require large-object manipulation, such as moving tables, where multiple robots must work collaboratively. Existing studies still lack a generalizable framework that can handle diverse objects, tasks, and robot team sizes. In this work, we propose CollaBot, a generalist framework for simultaneous collaborative manipulation. First, we use SEEM for scene segmentation and target-object extraction. Then, we propose a collaborative grasping framework that decomposes the task into local grasp pose generation and global coordination. Finally, we design a two-stage planning module to generate collision-free trajectories for task execution. Experimental results across different settings with varying objects, tasks, and numbers of robots indicate that our framework achieves a 72% success rate. This marks a substantial improvement over behavior cloning-based methods, validating the advantages of the proposed framework in complex multi-robot cooperative tasks. Real-world experiments further demonstrate the feasibility of our method in practical applications.
関連論文
- 人間の感覚運動モデルに適応するロボット協調マニピュレーション協調マニピュレーション
- 観察・推論・協調:ゼロショット協調のためのロボットパートナーの制約推論協調マニピュレーション
- 協調マニピュレータのタスク能力向上アルゴリズム協調マニピュレーション
- 入力制約下の劣駆動マルチチャネル系に対する協調マニピュレーションのためのスイッチング制御協調マニピュレーション
- 人間同士と人間-ロボット協調マニピュレーションにおける触覚コミュニケーション協調マニピュレーション
- H2-COMPACT:適応的接触軌道ポリシーによる人間-ヒューマノイド協調マニピュレーション協調マニピュレーション
