日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

長期計画/ポリシー統合arXiv:2607.18060

RoboHarness: メモリ駆動による異種ロボットポリシーの統合オーケストレーションによる長期的計画

RoboHarness: Memory-Driven Orchestration of Heterogeneous Robot Policies for Long-Horizon Planning

シェア:XThreadsFacebookLINEはてブBluesky

複数の異なるロボット制御システム(VLA、RL、TAMPなど)を再利用可能なスキルとして統合し、実行メモリとオンライン証拠を用いて能力境界を推定し、長期的タスクを能力に応じて分解・ルーティングするフレームワークを提案。ポリシー切り替え時の分布ミスマッチをメモリブリッジで緩和し、ゼロショット長期計画とOOD堅牢性を向上させた。

詳しい要約

1. どんなもの?

RoboHarnessは、長期的なロボットタスクを解決するための統一フレームワークである。異種のロボットポリシー(VLA、RLポリシー、TAMPシステムなど)を再利用可能なエージェント的スキルとしてカプセル化し、それらをオーケストレーションする。マルチモーダルな実行メモリとオンライン証拠を用いてポリシーの能力境界を特徴付け、能力認識の分解とルーティングを行う。また、Memory Bridgeを用いてポリシー間のハンドオフを安定化させる。

2. 先行研究と比べてどこがすごい?

既存のプランニング手法は、固定された適用範囲を持つ同質の事前定義スキルに基づいており、不確実な能力境界やクロスポリシー分布ミスマッチを考慮していない。RoboHarnessは、異種ポリシーの能力境界を動的に推定し、分布ミスマッチを扱う点で優れている。さらに、ポリシーの再トレーニングなしでハンドオフを安定化するMemory Bridgeを導入している点が新しい。

3. 技術・手法の肝は?

RoboHarnessは、異種ポリシーをエージェント的スキルとしてカプセル化する。マルチモーダル実行メモリとオンライン証拠を使用して、各ポリシーの能力境界を特徴付ける。能力認識の分解とルーティングにより、タスクを適切なポリシーに割り当てる。Memory Bridgeは、次のポリシーに関連する実行軌跡を取得し、その分布内状態領域を推定して、ロボットをその領域に誘導することで、ポリシーの再トレーニングなしでハンドオフを安定化する。

4. どうやって有効だと検証した?

3つの公開ベンチマーク、500のカスタマイズタスク、135の実ロボット実験で検証した。結果、能力認識ルーティングと安定したポリシーオーケストレーションが効果的であることを示し、ゼロショットの長期プランニングと分布外ロバストネスで大幅な改善を達成した。

5. 議論はある?

要旨からは、RoboHarnessの限界や潜在的な欠点についての議論は不明。ただし、異種ポリシーの統合におけるスケーラビリティや、能力境界の推定精度がタスク性能に与える影響などが議論の対象となる可能性がある。

6. 次に読むべき論文は?

要旨で参照されている関連研究として、VLA、RLポリシー、TAMPシステムが挙げられる。また、同分野の定番として、タスクプランニングとモーションプランニングの統合に関する研究や、スキルライブラリを用いた長期プランニングの研究が考えられる。具体的には、'Task and Motion Planning'や'Skill Libraries for Long-Horizon Tasks'に関する論文が関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jinbang Huang, Yuanzhao Hu, Zhiyuan Li, Ran Qi, Yixin Xiao, Zhanguang Zhang, Mark Coates, Tongtong Cao, Yingxue Zhang

分類: cs.RO

原文アブストラクト

Long-horizon robotic tasks require diverse capabilities that no single policy can reliably provide. Heterogeneous policies offer complementary strengths, but orchestrating them requires reasoning over uncertain capability boundaries and cross-policy distribution mismatch, which are largely overlooked by existing planning methods built on homogeneous, predefined skills with fixed applicability. We propose RoboHarness, a unified framework that encapsulates independently developed robot control systems as reusable agentic skills. Although instantiated in this work with VLAs, RL policies, and task-and-motion planning (TAMP) systems, RoboHarness is designed as a general framework compatible with a broader range of robot policies, such as navigation policies, model predictive controllers, and world-action models. RoboHarness uses multi-modal execution memory and online evidence to characterize policy capability boundaries for capability-aware decomposition and routing. To stabilize policy handoffs, its Memory Bridge retrieves execution trajectories associated with the next policy, estimates its in-distribution state region, and guides the robot toward that region without joint policy retraining. Extensive experiments on three public benchmarks, 500 customized tasks, and 135 real-robot experiments demonstrate effective capability-aware routing and stable policy orchestration, yielding substantial improvements in zero-shot long-horizon planning and out-of-distribution robustness.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI