日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2512.24638

適応的ワーキングメモリ再符号化によるロボットマニピュレーションの状態曖昧性解消

Resolving State Ambiguity in Robot Manipulation via Adaptive Working Memory Recoding

シェア:XThreadsFacebookLINEはてブBluesky

人間のワーキングメモリ再符号化に着想を得て、適応的ワーキングメモリを備えた視覚運動ポリシーPAMを提案し、長い履歴窓でも高速推論を維持しながら状態曖昧性を解消する。

詳しい要約

1. どんなもの?

- ロボットマニピュレーションにおける state ambiguity(同一観測が複数の有効な行動軌跡に対応しうる曖昧性)を扱う研究。 - 視覚運動 policy が履歴から適切な情報の種類・レベルを抽出し現在の task phase を同定する必要があるという問題設定。 - 提案手法 PAM: Adaptive working Memory を備えた新規 visuomotor Policy。 - 300-frame の履歴窓を最小限の追加学習コストで扱い、高い推論速度を維持する。

2. 先行研究と比べてどこがすごい?

- 履歴窓を単純に拡張する手法は計算コストが高く、深刻な overfitting を招きうると指摘。 - PAM は two-stage の学習で追加コストを最小化しつつ 300-frame 履歴を支持。 - 約10秒の履歴窓でも安定学習と 20Hz 以上の推論速度を両立。 - 具体的な既存手法名との定量比較は要旨からは不明。

3. 技術・手法の肝は?

- 階層的 frame feature extractor が motion primitives 用と temporal disambiguation 用の2種類の表現を生成。 - range-specific queries を持つ context router が複数の履歴長にわたる compact context features を生成。 - 履歴情報の再構成を補助目的(auxiliary objective)として導入し、context router を有効な bottleneck として機能させる。 - two-stage の学習方式で追加学習コストを抑制。

4. どうやって有効だと検証した?

- 7つのタスクを慎重に設計し、複数の state ambiguity シナリオを同時に扱えることを検証。 - 約10秒の履歴窓で安定した学習を確認。 - 20Hz 以上の推論速度を維持することを確認。 - 具体的なベースライン比較や指標の詳細は要旨からは不明。

5. 議論はある?

- 履歴窓拡張の計算コストと overfitting 問題への対処が動機。 - context router を bottleneck 化するための再構成補助目的の有効性が論点。 - 長い履歴窓と推論速度のトレードオフに関する議論。 - 限界や失敗事例、一般的な実機での検証については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法として visuomotor policy、working memory、context router、bottleneck 表現学習、motion primitives に関する研究を挙げる。 - 同分野の定番として behavior cloning 系 visuomotor policy や Transformer ベースの系列モデルを参照候補とする。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Qingda Hu, Ziheng Qiu, Zijun Xu, Kaizhao Zhang, Xizhou Bu, Zuolei Sun, Bo Zhang, Jieru Zhao, Zhongxue Gan, Wenchao Ding

分類: cs.RO

原文アブストラクト

State ambiguity is common in robotic manipulation. Identical observations may correspond to multiple valid behavior trajectories. The visuomotor policy must correctly extract the appropriate types and levels of information from the history to identify the current task phase. However, naively extending the history window is computationally expensive and may cause severe overfitting. Inspired by the continuous nature of human reasoning and the recoding of working memory, we introduce PAM, a novel visuomotor Policy equipped with Adaptive working Memory. With minimal additional training cost in a two-stage manner, PAM supports a 300-frame history window while maintaining high inference speed. Specifically, a hierarchical frame feature extractor yields two distinct representations for motion primitives and temporal disambiguation. For compact representation, a context router with range-specific queries is employed to produce compact context features across multiple history lengths. And an auxiliary objective of reconstructing historical information is introduced to ensure that the context router acts as an effective bottleneck. We meticulously design 7 tasks and verify that PAM can handle multiple scenarios of state ambiguity simultaneously. With a history window of approximately 10 seconds, PAM still supports stable training and maintains inference speeds above 20Hz. Project website: https://tinda24.github.io/pam/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI