日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2609.22730

BEACON: 不確実性下の模倣学習のための信念を用いた適応制御

BEACON: Belief-Enabled Adaptive CONtrol for Imitation Learning under Uncertainty

シェア:XThreadsFacebookLINEはてブBluesky

隠れ状態をベイズ信念として構造化し、拡散ポリシーに条件付けることで、不確実性に応じて探索と活用を切り替える模倣学習手法を提案。

詳しい要約

1. どんなもの?

- ロボットマニピュレーションにおける部分的観測可能な設定で、隠れ状態をベイズ信念として構造化表現し、拡散ポリシーに条件付けする手法 BEACON を提案。 - 信念は現在の最も確からしい状態推定と残存不確実性を同時に表現し、生の観測履歴を置き換える。 - これにより、ポリシーが探索と活用を暗黙的に切り替え、状態エイリアシングに対処する。

2. 先行研究と比べてどこがすごい?

- 従来の模倣学習は直近の生の観測履歴に直接条件付けするため、状態エイリアシングにより性能が低下する。 - BEACON は信念という構造化・コンパクトな入力により、明示的なモード切替や報酬整形なしで探索・活用を調整できる。 - 観測のみのベースラインを大幅に上回り、特権的な真値性能に近づく。

3. 技術・手法の肝は?

- 隠れ状態のベイズ信念を構造化表現として用い、拡散ポリシーに条件付けする。 - 信念は連続値(触覚センシングによるトウモロコシ茎グリッパ位置合わせ)と離散カテゴリ分布(ラッチ式ドア開け)の2種類。 - ポリシーは信念の不確実性に基づき探索行動を適応させる。

4. どうやって有効だと検証した?

- 2つのドメイン(連続信念と離散信念)で評価。 - 信念条件付きポリシーは観測のみのベースラインを大幅に上回り、特権的真値性能に近づいた。 - アブレーションにより、推論時に信念の不確実性に応じて探索行動を適応させることを示した。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。同分野の定番として、部分的観測下の模倣学習(例:Behavior Cloning with History, DAgger, Diffusion Policy)やベイズフィルタ(Particle Filter, Kalman Filter)に関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Moonyoung Lee, Soumojit Bhattacharya, George Kantor, Oliver Kroemer

分類: cs.RO

原文アブストラクト

Robot manipulation tasks often involve hidden state information that cannot be directly observed and must be inferred through sequential physical interactions. In such partially observable settings, conditioning an imitation learning policy directly on the recent raw observation history leads to poor performance. This is due to state aliasing, wherein identical observations may arise from different hidden states, and the policy receives conflicting action labels for the same input. To enable history-aware disambiguation capability, we propose conditioning a diffusion policy on a structured representation of the hidden states using Bayesian belief that exposes both the current most likely state estimate and the remaining uncertainty. This representation replaces raw history with a structured, compact input, enabling the policy to implicitly modulate between exploratory and exploitative behaviors based on belief uncertainty, without explicit mode switching or reward shaping. We evaluate across two domains with qualitatively different belief representations: a continuous belief for cornstalk gripper alignment via tactile sensing, and a discrete categorical distribution for latched door opening. In both domains, the belief-conditioned policy substantially outperforms the observation-only baseline and approaches privileged ground-truth performance, with ablations illustrating that the policy adapts its exploration behavior depending on the belief uncertainty at inference time.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI