日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2601.19514

PALM: 知覚アライメントによる局所視覚運動ポリシーの汎化性向上

PALM: Enhanced Generalizability for Local Visuomotor Policies via Perception Alignment

シェア:XThreadsFacebookLINEはてブBluesky

操作ポリシーを大域的な粗い部分と局所的な細かい部分に分け、局所レベルで視覚的注目と固有受容感覚表現を揃えることで、追加の入力やデータ収集なしに分布外環境への汎化性能を高めた研究。

詳しい要約

1. どんなもの?

- 画像ベースのbehavior cloningにおける一般化を改善する手法PALMを提案。 - 局所的なaction分布の不変性を利用し、OODシフト(workspace shifts, viewpoint changes, cross-embodiment transfer)に同時に対処。 - 追加の入力モダリティ、モデル変更、データ収集を必要としない。 - 操作ポリシーを粗いglobalコンポーネントとfine-grainedなlocalポリシーにモジュール化。

2. 先行研究と比べてどこがすごい?

- 既存手法は一般化の各軸(workspace shifts, viewpoint changes, cross-embodiment transfer)を個別に扱い、複雑なパイプラインに依存することが多い。 - PALMはこれらを同時に扱い、追加の入力モダリティやモデル変更、データ収集なしで実現。 - 実験でOOD性能低下をシミュレーションで8%、実世界で24%に抑え、ベースラインの45%と77%を大幅に改善。

3. 技術・手法の肝は?

- 操作ポリシーを粗いglobalコンポーネントとfine-grainedなlocalポリシーにモジュール化。 - localポリシーレベルで、局所的な視覚フォーカスと一貫したproprioceptive representationを強制し、in-domainとOOD入力間の不一致を低減。 - これにより、OOD条件下で不変なlocal actionを取得可能にする。

4. どうやって有効だと検証した?

- シミュレーションと実世界の実験で評価。 - OOD性能低下がシミュレーションで8%、実世界で24%であることを示し、ベースラインの45%と77%と比較。 - 具体的なタスクやデータセットは要旨からは不明。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、image-based behavior cloning、workspace shifts、viewpoint changes、cross-embodiment transferに関する研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ruiyu Wang, Zheyu Zhuang, Danica Kragic, Florian T. Pokorny

分類: cs.RO

原文アブストラクト

Generalizing beyond the training domain in image-based behavior cloning remains challenging. Existing methods address individual axes of generalization, workspace shifts, viewpoint changes, and cross-embodiment transfer, yet they are typically developed in isolation and often rely on complex pipelines. We introduce PALM (Perception Alignment for Local Manipulation), which leverages the invariance of local action distributions between out-of-distribution (OOD) and demonstrated domains to address these OOD shifts concurrently, without additional input modalities, model changes, or data collection. PALM modularizes the manipulation policy into coarse global components and a local policy for fine-grained actions. We reduce the discrepancy between in-domain and OOD inputs at the local policy level by enforcing local visual focus and consistent proprioceptive representation, allowing the policy to retrieve invariant local actions under OOD conditions. Experiments show that PALM limits OOD performance drops to 8% in simulation and 24% in the real world, compared to 45% and 77% for baselines.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI