日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2606.14551

TRACE: 遅延証拠を用いた視覚運動模倣のための軌跡ルーティング因果記憶

TRACE: Trajectory-Routed Causal Memory for Delayed-Evidence Visuomotor Imitation

シェア:XThreadsFacebookLINEはてブBluesky

ロボットが自律動作中に、過去に見たが現在は見えない情報(遅延証拠)に基づいて判断する必要があるタスクを扱い、軌跡の特徴を用いて視覚情報を記憶・検索するフレームワークTRACEを提案した。

詳しい要約

1. どんなもの?

- 遅延証拠タスク(delayed-evidence tasks)を対象とした視覚運動模倣(visuomotor imitation)のための記憶フレームワークTRACEを提案。 - 遅延証拠タスクとは、初期の手がかり(cue)が後の意思決定点より前に消えるため、見た目が似た観測でも異なる行動が必要になる設定。 - 現在の観測だけでは制御に十分な状態にならない問題を扱う。 - 物体identity、target choice、route依存stateなどタスク関連の視覚・ロボット状態の証拠を、固定サイズのlatent memoryに保存する。 - メモリは長いepisodeでもboundedに保たれる。

2. 先行研究と比べてどこがすごい?

- 生の時間や手動で与えたタスクラベルでメモリをインデックスする代わりに、path signaturesを使う点が新しい。 - path signaturesは実行されたロボット状態trajectoryのコンパクトで順序に敏感な特徴。 - 視覚cueそのものを保存せず、cueが見えていた時に保存した証拠を書く/取り出すためのtrajectory-conditioned keysを提供する。 - 実世界の長horizon manipulationタスクで、short-historyやrecurrent memoryを含む代替baselineよりbranch選択とタスク成功率を改善。 - policy backbone、action head、imitation objectiveを変えず、軽量adapterでpolicyに接続できる。

3. 技術・手法の肝は?

- タスク関連の視覚・ロボット状態の証拠を固定サイズのlatent memoryに保存する。 - メモリのインデックスにpath signatures(実行されたロボット状態trajectoryの順序に敏感なコンパクト特徴)を使用。 - 視覚cue自体は保存せず、trajectory-conditioned keysで証拠の書き込みと取得を行う。 - ロボットが曖昧な観測に到達した際、policyはTRACE memoryにconditioningして欠けたcontextを回復し正しいbranchを選ぶ。 - 軽量adapterでpolicyに接続し、backboneやaction head、imitation objectiveは変更しない。

4. どうやって有効だと検証した?

- 視覚的に曖昧なbranch pointを含む実世界の長horizon manipulationタスクで評価。 - short-historyやrecurrent memoryを含む代替baselineと比較。 - branch選択とタスク成功率の改善を確認。 - 詳細な実験設定や指標の定義は要旨からは不明。

5. 議論はある?

- 要旨からは不明。 - 限界、失敗事例、計算コスト、path signaturesの感度などの議論は要旨に記載されていない。

6. 次に読むべき論文は?

- short-history memory - recurrent memory - visuomotor imitation policies - path signatures - latent memory for long-horizon manipulation

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zihao Li, Ranpeng Qiu, Yincong Chen, Guoqiang Ren, Weiming Zhi

分類: cs.RO, cs.AI

原文アブストラクト

Robots under autonomous operation may require decisions based on evidence that is no longer visible. We study delayed-evidence tasks, where an early cue disappears before a later decision point, so visually similar observations can require different actions. In these settings, the current observation is not a sufficient state for control. We introduce TRAjectory-routed Causal Evidence (TRACE), a memory framework for visuomotor imitation policies. TRACE stores task-relevant visual and robot-state evidence, such as object identity, target choice, or route-dependent state, in a fixed-size latent memory that remains bounded over long episodes. Instead of indexing memory by raw time or manually provided task labels, TRACE uses path signatures: compact, order-sensitive features of the executed robot-state trajectory. These signatures do not store the visual cue itself; rather, they provide trajectory-conditioned keys for writing and retrieving the evidence stored when the cue was visible. When the robot later reaches an ambiguous observation, the policy conditions on TRACE memory to recover the missing context and choose the correct branch. TRACE attaches through lightweight adapters to policies, without changing the policy backbone, action head, or imitation objective. Across real-world long-horizon manipulation tasks with visually ambiguous branch points, TRACE improves branch selection and task success over alternative baselines, including short-history and recurrent memory. Project page: https://jeong-zju.github.io/trace

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI