日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

共有制御/行動適応arXiv:2606.06461

ポリシー更新を伴わないフローに基づく行動適応

Flow-based Policy Adaptation without Policy Updates

シェア:XThreadsFacebookLINEはてブBluesky

事前学習済みポリシーや人間の操作による非熟練の行動を、フローモデルを用いて熟練者の行動分布へと選択的に補正する共有制御モジュールGLOVESを提案。逆フロー評価による介入ゲートで、分布内の行動はそのまま通し、異常な行動のみ補正する。

詳しい要約

1. どんなもの?

- 事前学習済みpolicy・foundation model・人間オペレータなどから得た非専門家actionを、専門家action分布へtransportして修正するflow-based適応手法GLOVESを提案。 - 完全自律制御に置き換えるのではなく、action-levelで選択的に適応し、agent intentを保持しつつtask successを改善。 - 学習したflowのreverse flow評価によりin-distribution scoringを行い、OODなactionのみ修正するintervention gateとして利用。 - 少数のdemonstrationや再利用可能な成功skill segmentという限定的なexpert supervisionで動作。 - 局所的なexpert action patternを学習し実行時にstitchingすることで、軽量なshared-control moduleを提供。

2. 先行研究と比べてどこがすごい?

- 従来はpretrained policyやfoundation model、人間オペレータのactionをそのまま使うか、完全自律制御に置き換える傾向があった。 - GLOVESはagentic controlを完全自律に置き換えず、action-levelで選択的に適応する点が異なる。 - 非専門家actionをexpert action分布へtransportするflow-based手法により、suboptimal・noisy・task-specific expert behaviorとmisalignedなactionを修正。 - reverse flow評価によるin-distribution scoringをintervention gateとして使い、必要な時だけassistanceを提供する点が新しい。 - 限定的なexpert supervisionで済み、少数のdemonstrationや成功skill segmentを再利用できる点が効率的。

3. 技術・手法の肝は?

- flow-based adaptation手法群GLOVESを提案し、非専門家actionをexpert action分布へtransportして修正。 - 学習したflowのreverse flow評価によりin-distribution scoring mechanismを構成。 - このscoreをintervention gateとして用い、expert分布と整合するactionはそのまま通し、anomalous/OODなactionのみ修正。 - 局所的なexpert action patternを学習し、実行時にstitchingすることで適応。 - 少数のdemonstrationまたは再利用可能な成功skill segmentという限定的なexpert supervisionを利用。

4. どうやって有効だと検証した?

- 要旨からは不明。 - コードとデモがripl.github.io/GLOVES_webで公開されているとの記載のみ。 - 具体的なtask・環境・baseline・評価指標・成功率的な検証結果は要旨に記載がない。

5. 議論はある?

- 要旨からは不明。 - 限定的なexpert supervisionで済む点、shared-control moduleとして軽量である点、taskや環境をまたいだrobustなaction adaptationを提供する点が主張されている。 - 一方で、限界・失敗事例・計算コスト・安全性・一般化範囲に関する議論は要旨に記載がない。

6. 次に読むべき論文は?

- 要旨で参照/比較されている個別研究は明示されていない。 - 関連手法として、pretrained policy、foundation model、human operator、flow-based model、shared-control、OOD detection、imitation learning、reinforcement learningが挙げられる。 - 同分野の定番として、behavior cloning、DAgger、diffusion policy、flow matching、normalizing flow、intervention-based shared autonomyなどが次に読む候補。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Luzhe Sun, Jingtian Ji, Haoran Chen, Jiawei Zhou, Matthew R. Walter

分類: cs.RO

原文アブストラクト

Leveraging prior knowledge from pretrained policies, foundation models, or human operators offers an efficient alternative to learning robot skills from scratch. However, these agents often provide actions that are suboptimal, noisy, or misaligned with task-specific expert behavior. We propose GLOVES, a family of flow-based adaptation methods that correct non-expert actions by transporting them toward an expert action distribution. Rather than replacing agentic control with full autonomy, GLOVES performs selective action-level adaptation, improving task success while preserving agent intent. The learned flow also provides a natural in-distribution scoring mechanism through reverse flow evaluation. We use this signal as an intervention gate: actions that appear consistent with the expert distribution are passed through unchanged, while anomalous or out-of-distribution (OOD) actions are corrected. In this way, assistance is only provided when necessary. GLOVES requires only limited expert supervision, using a small number of demonstrations or reusable successful skill segments. By learning local expert action patterns and stitching them during execution, GLOVES provides a lightweight shared-control module for robust action adaptation across tasks and environments. Code and demos are available at ripl.github.io/GLOVES_web.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI