日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

協調マニピュレーションarXiv:2508.03526

CollaBot: 視覚言語ガイドによる同時協調マニピュレーション

CollaBot: Vision-Language Guided Simultaneous Collaborative Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

視覚言語モデルを活用し、複数ロボットが大型物体を協調して把持・運搬するための汎用フレームワークを提案。実環境を含む実験で従来手法を上回る72%の成功率を達成した。

詳しい要約

1. どんなもの?

- 複数ロボットが同時に協調して大型物体を操作するための汎用フレームワーク CollaBot を提案した研究。 - 対象は factory や domestic 環境での table 移動など、単一ロボットでは扱いにくい large-object manipulation。 - 多様な物体・タスク・ロボット台数に対応できる generalist な枠組みを目指す。 - 構成は SEEM による scene segmentation と target-object extraction、collaborative grasping、two-stage planning。

2. 先行研究と比べてどこがすごい?

- 従来の manipulation 研究は単一ロボットと比較的小さな物体が中心で、大型物体の協調操作は不足していた。 - 既存研究には多様な物体・タスク・チームサイズを扱える汎用フレームワークが欠けていた点を課題としている。 - 実験で 72% の success rate を達成し、behavior cloning ベース手法を大きく上回ったと報告。 - 複雑な multi-robot cooperative tasks における提案フレームワークの優位性を示した点が主張。

3. 技術・手法の肝は?

- まず SEEM を用いて scene segmentation と target-object extraction を行う。 - collaborative grasping framework では、タスクを local grasp pose generation と global coordination に分解する。 - さらに two-stage planning module を設計し、タスク実行のための collision-free trajectories を生成する。 - これらを組み合わせ、多様な設定に対応する同時協調操作を実現する構成。

4. どうやって有効だと検証した?

- 物体・タスク・ロボット台数を変えた複数の設定で実験を実施。 - その結果、72% の success rate を達成したと報告。 - behavior cloning ベースの手法との比較により、複雑な multi-robot cooperative tasks での優位性を検証。 - 実世界実験も行い、実応用における feasibility を示した。

5. 議論はある?

- 要旨では 72% の success rate と behavior cloning 比較、実世界実験の feasibility が述べられている。 - 失敗事例の分析や限界、ロボット台数増加時のスケーラビリティ等の詳細は要旨からは不明。 - 汎用性を掲げるが、対象物体・タスクの範囲や一般化性能の議論は要旨からは不明。

6. 次に読むべき論文は?

- 比較対象として挙げられている behavior cloning ベースの multi-robot manipulation 研究。 - 本研究で使われている SEEM に関する scene segmentation 研究。 - collaborative grasping や global coordination に関する multi-robot grasping 研究。 - collision-free trajectory 生成のための two-stage planning に関連する motion planning 研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kun Song, Gaoming Chen, Shentao Ma, Ninglong Jin, Guangbao Zhao, Mingyu Ding, Zhenhua Xiong, Jia Pan

分類: cs.RO

原文アブストラクト

One central goal of robotics is to enable robots to interact with the physical world. Traditional manipulation studies primarily focus on single robots and relatively small objects. However, factory and domestic environments often require large-object manipulation, such as moving tables, where multiple robots must work collaboratively. Existing studies still lack a generalizable framework that can handle diverse objects, tasks, and robot team sizes. In this work, we propose CollaBot, a generalist framework for simultaneous collaborative manipulation. First, we use SEEM for scene segmentation and target-object extraction. Then, we propose a collaborative grasping framework that decomposes the task into local grasp pose generation and global coordination. Finally, we design a two-stage planning module to generate collision-free trajectories for task execution. Experimental results across different settings with varying objects, tasks, and numbers of robots indicate that our framework achieves a 72% success rate. This marks a substantial improvement over behavior cloning-based methods, validating the advantages of the proposed framework in complex multi-robot cooperative tasks. Real-world experiments further demonstrate the feasibility of our method in practical applications.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI