日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2609.32239

非IIDマルチロボットマニピュレーションのための連合部分空間誘導型視覚-言語-行動ポリシー蒸留

Federated Subspace Guided Vision-Language-Action Policy Distillation for Non-IID Multi-Robot Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

複数ロボットが非IID環境で連合学習する際に、低ランク部分空間と行動分布の蒸留、および互換性に基づくクラスタリングで表現ドリフトを抑え、マニピュレーションポリシーの知識転移を改善する手法を提案。

詳しい要約

1. どんなもの?

- 複数ロボットの操作policyを、訓練demonstrationを集中管理せずに連合学習で改善する枠組み。 - 非IIDなtask・環境分布によりrepresentation driftや互換性のないrobot-policy更新が生じ、単純なparameter aggregationが破壊的になる問題を扱う。 - 提案はFedDRMan:federated subspace-guided distillation framework。 - 各communication roundでserver modelがfrozen teacherを提供し、local behavior cloningを行う。 - low-rank multimodal subspaceとaction-distribution distillationで、グローバルに有用なrepresentation geometryとpolicy behaviorを保持する。 - 異種aggregationに対し、更新互換性でclientをgroupingし、clusterごとにpersistent modelを維持する。 -…

2. 先行研究と比べてどこがすごい?

- 従来のfederated learningは、非IIDなtask・環境分布下でrepresentation driftや互いに非互換なrobot-policy更新を生じ、naive parameter aggregationが破壊的になりうる。 - FedDRManは、frozen teacherによるlocal behavior cloningと、low-rank multimodal subspace・action-distribution distillationを組み合わせ、グローバルに有用なrepresentation geometryとpolicy behaviorを保持する。 - 異種aggregationに対して、更新互換性によるclient groupingとclusterごとのpersistent model、さらにspectral rebalancingを導入する点が異なる。 - LIBERO上の多様なnon-IID設定・heterogeneity level・client participation変化で、強いfederated baselineを一貫して上…

3. 技術・手法の肝は?

- server modelをfrozen teacherとして各communication roundのlocal behavior cloningに用いる。 - low-rank multimodal subspace distillationにより、グローバルに有用なrepresentation geometryを保持する。 - action-distribution distillationにより、policy behaviorを保持する。 - 異種aggregation対策として、更新互換性に基づきclientをgroupingし、clusterごとにpersistent modelを維持する。 - serverが各compatible aggregateをspectrally rebalanceし、弱いtask-relevantなrobot-policy更新方向の減衰を緩和する。 - これらにより、非IIDなtask・環境分布下でのrepresentation driftと非互換更新を抑える。

4. どうやって有効だと検証した?

- LIBERO上で、多様なnon-IID設定、heterogeneity level、client participation変化を含む広範な実験を実施。 - ablationとaggregation analysisも行っている。 - FedDRManがknowledge transferを大幅に改善し、強いfederated baselineを一貫して上回ることを示す。 - peak mean success rate 80.7%を達成し、評価した最強のfederated baselineより11.6 percentage points高い。

5. 議論はある?

- 要旨からは不明。 - 非IIDなtask・環境分布がrepresentation driftや非互換なrobot-policy更新を引き起こし、naive parameter aggregationが破壊的になる点は問題として述べられている。 - 提案手法の限界、失敗事例、計算コスト、通信コスト、cluster数の感度などに関する議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている具体的なfederated baseline名は記載されていない。 - 関連手法として、federated learning、behavior cloning、knowledge distillation、low-rank subspace distillation、spectral rebalancing、non-IID multi-robot manipulationが挙げられる。 - データセットとしてLIBEROが用いられている。 - 同分野の定番として、federated averaging (FedAvg) やvision-language-action (VLA) policy、robot manipulation benchmarkを次に読む候補として挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Biprodip Pal, Kaushik Roy, Yanming Zhu, Brendan Tidd, Alan Wee-Chung Liew, Peyman Moghadam

分類: cs.RO, cs.CV, cs.DC, cs.LG

原文アブストラクト

Federated learning offers a natural way for multiple robots to jointly improve manipulation policies without requiring centralized access to training demonstrations. However, non-IID task and environment distributions can induce representation drift and mutually incompatible robot-policy updates, making naive parameter aggregation destructive. We present FedDRMan, a federated subspace-guided distillation framework for heterogeneous robot manipulation. At each communication round, the server model provides a frozen teacher for local behavior cloning, while low-rank multimodal subspace and action-distribution distillation preserve globally useful representation geometry and policy behavior. To address heterogeneous aggregation, FedDRMan groups clients by update compatibility and maintains a persistent model for each cluster. The server then spectrally rebalances each compatible aggregate to mitigate attenuation of weaker task-relevant robot-policy update directions. Extensive experiments on LIBERO across diverse non-IID settings, heterogeneity levels, client participation variation, together with ablations and aggregation analyses, show that FedDRMan substantially improves knowledge transfer and consistently outperforms strong federated baselines achieving a peak mean success rate of 80.7%, 11.6 percentage points above the strongest evaluated federated baseline.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI