日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2610.15337

CoLA: 学習済みアダプタによる複数VLAの協調

CoLA: Multi-VLA Coordination via Learned Adapters

シェア:XThreadsFacebookLINEはてブBluesky

各エージェントのVLAを凍結し、軽量なメッセージチャネルと拡散行動ヘッドを学習させることで、情報が私的な場合にのみ明示的通信が有効となる分散協調手法を提案。

詳しい要約

1. どんなもの?

本論文は CoLA (Coordination via Learned Adapters) を提案する。複数の Vision-Language-Action (VLA) エージェントが同一作業空間を共有する際の協調を扱う。各エージェントの VLA backbone は凍結し、軽量な message channel と per-arm diffusion action head のみを学習、完全に decentralised な実行を行う。明示的通信がいつ必要かを、各エージェントの観測可能性が異なる 3 タスクで検証する。

2. 先行研究と比べてどこがすごい?

従来 VLA は単一エージェントの isolated policy として展開されることが多い。CoLA は backbone を凍結したまま軽量 adapter のみ学習する点、および明示的通信の必要性が『情報が private なときのみ』生じることを実験的に示した点が新しい。occluded tray handover では messages を zero にすると 1.3% に対し 76.0% 成功。shared overhead camera 下では通信除去の影響がほぼ無い (90.6% vs 88.3%、63.5% vs 60.0%) ことも示す。

3. 技術・手法の肝は?

各エージェントの VLA backbone を凍結し、軽量な message channel と per-arm diffusion action head をその上に学習する。実行は完全に decentralised。通信の有無を切り替えて、観測の共有/私秘性が性能に与える影響を比較する設計。異なる VLA backbone にも一般化する。

4. どうやって有効だと検証した?

観測可能性の異なる 3 タスクで検証。occluded tray handover (box の colour marker が片方の agent にのみ見える) で 76.0% vs messages zero で 1.3%。two-arm/three-arm handover では shared overhead camera 下で通信除去の影響は測定不能 (90.6% vs 88.3%、63.5% vs 60.0%) だが、two-arm の wrist-only variant では 74.8% vs 64.3% に低下。凍結 π_{0.5} backbone の occluded tray タスクで LoRA-fine-tuned baseline と同等の成功率 (37.3% vs 34.7%) をはるかに少ない学習パラメータで達成。box 配置時、CoLA は 71.8% で正しい tray を選択、独立 fine-tune baseline は chance level (34.7% vs 33.3%)。

5. 議論はある?

明示的通信は情報が private な場合にのみ重要で、共有観測がある場合は冗長になりうる。backbone を凍結しても軽量 adapter で協調が学習可能。ただし、どの条件で通信が必須か、他のタスクや実環境での一般性については要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている研究として、LoRA-fine-tuned baseline、π_{0.5} backbone が挙げられる。関連手法として Vision-Language-Action (VLA) モデル、diffusion action head、decentralised multi-agent coordination の定番研究を次に読むべき。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ahaskar Kashyap, Jiawen Zong, Boyu Ma, Chuhao Zhou, Jingliang Li, Stefano V. Albrecht, Jianfei Yang

分類: cs.RO, cs.LG, cs.MA

原文アブストラクト

Vision-Language-Action (VLA) models are typically deployed as isolated single-agent policies. When several such agents share a workspace, they can coordinate implicitly, by observing one another, or explicitly, by exchanging messages, but it remains unclear when explicit communication becomes necessary. We introduce CoLA (Coordination via Learned Adapters), which keeps each agent's VLA backbone frozen and trains a lightweight message channel and a per-arm diffusion action head on top, with fully decentralised execution. Across three tasks that differ in how much each agent can observe, the channel matters only when information is private. On an occluded tray handover, where the box's colour marker is visible to one agent only, CoLA reaches 76.0% success versus 1.3% with messages zeroed throughout training. On two-arm and three-arm handover tasks, removing messages has no measurable effect with a shared overhead camera (90.6% vs. 88.3% at two arms; 63.5% vs. 60.0% at three), but lowers success on the two-arm task's wrist-only variant (74.8% vs. 64.3%). This architecture generalises across different VLA backbones as well. With a frozen $π_{0.5}$ backbone on the same occluded tray task, CoLA matches the overall success rate of a LoRA-fine-tuned baseline (37.3% vs. 34.7%) using a fraction of the trainable parameters. When CoLA places the box, it selects the correct tray 71.8% of the time, whereas the independently fine-tuned baseline, whose placing arm never sees the marker, selects it at chance level (34.7% against 33.3%).

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI