日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

操作学習arXiv:2603.04560

局所修正から汎用スキルへ:MEMOによる神経記号ポリシーの改善

From Local Corrections to Generalized Skills: Improving Neuro-Symbolic Policies with MEMO

シェア:XThreadsFacebookLINEはてブBluesky

ロボットの失敗時に人間が与える自然言語の修正を収集・クラスタリング・再表現して、汎用的なテキストガイダンスとコードスキルテンプレートを合成し、神経記号ポリシーのスキルを動的に拡張する手法MEMOを提案した。

詳しい要約

1. どんなもの?

- 神経記号的フレームワークを用いた汎用操作ポリシーを改善する手法「Memory Enhanced Manipulation (MEMO)」を提案。 - ロボットが複雑なタスクを意味的サブタスクに分解し、スキルを動的に拡張する。 - ユーザーフィードバックを活用し、スキルブックを構築・維持する。

2. 先行研究と比べてどこがすごい?

- 従来の神経記号的フレームワークでは、スキルが制約となり、適切なスキルが生成できないとポリシーが失敗する。 - MEMOはユーザーフィードバックを収集・クラスタリング・言い換えすることで、一般的なテキストガイダンスとコード化されたスキルテンプレートを合成し、スキルを動的に拡張する。 - これにより、既存のベースラインが失敗する新規タスクへの一般化が可能になる。

3. 技術・手法の肝は?

- 人間のフィードバックとタスク成功から取得したスキルブックを構築・維持する。 - 実行時にスキルブックから関連するテキストとコードを検索し、ポリシーが新しいスキルを生成できるようにする。 - 複数のユーザーとタスクにわたる自然言語の修正を収集・クラスタリング・言い換えすることで、一般的なテキストガイダンスとコード化されたスキルテンプレートを合成する。

4. どうやって有効だと検証した?

- 実験により、MEMOがローカルなフィードバックを一般的なスキルテンプレートに集約し、既存のベースラインが失敗する新規タスクへの一般化を可能にすることを示した。 - 詳細な検証方法は要旨からは不明。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究や関連手法は明示されていない。 - 同分野の定番として、neuro-symbolic frameworks、vision and language models、retrieval-augmented skillbook、motion primitives、trajectory snippetsなどが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Benjamin A. Christie, Yinlong Dai, Mohammad Bararjanianbahnamiri, Simon Stepputtis, Dylan P. Losey

分類: cs.RO

原文アブストラクト

Recent works use a neuro-symbolic framework for general manipulation policies. The advantage of this framework is that -- by applying off-the-shelf vision and language models -- the robot can break complex tasks down into semantic subtasks. However, the fundamental bottleneck is that the robot needs skills to ground these subtasks into embodied motions. Skills can take many forms (e.g., trajectory snippets, motion primitives, coded functions), but regardless of their form skills act as a constraint. The high-level policy can only ground its language reasoning through the available skills; if the robot cannot generate the right skill for the current task, its policy will fail. We propose to address this limitation -- and dynamically expand the robot's skills -- by leveraging user feedback. When a robot fails, humans can intuitively explain what went wrong (e.g., ``no, go higher''). While a simple approach is to recall this exact text the next time the robot faces a similar situation, we hypothesize that by collecting, clustering, and re-phrasing natural language corrections across multiple users and tasks, we can synthesize more general text guidance and coded skill templates. Applying this hypothesis we develop Memory Enhanced Manipulation (MEMO). MEMO builds and maintains a retrieval-augmented skillbook gathered from human feedback and task successes. At run time, MEMO retrieves relevant text and code from this skillbook, enabling the robot's policy to generate new skills while reasoning over multi-task human feedback. Our experiments demonstrate that using MEMO to aggregate local feedback into general skill templates enables generalization to novel tasks where existing baselines fall short. See supplemental material here: https://collab.me.vt.edu/memo

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI