日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2607.26055

πR²: リアクティブなリアルタイムフローポリシー

$\pi\mathbf{R}^2$: Reactive Real-time Flow Policies

シェア:XThreadsFacebookLINEはてブBluesky

大規模な事前学習済みバックボーンを用いたアクションチャンキング型のフローポリシーを、リアクティブかつリアルタイムに動作させる手法を提案。高速チャネルと低速チャネルを分離し、遅延適応型のフロースケジュールにより、動的な閉ループ制御を実現する。

詳しい要約

1. どんなもの?

πR²は、大規模な事前学習済みバックボーンに基づくaction-chunking flow policiesを、リアクティブかつリアルタイムに動作させるための手法。従来のchunkはオープンループで実行されるため、実行中のセンサ入力に反応できない。πR²は、高速チャネル(proprioception)と非同期更新の低速チャネル(vision-language features)に条件付けを分割し、さらに遅延適応型flow scheduleを導入することで、1ステップのdenoisingでアクションを生成し、ハードウェアの遅延に適応する。GR00T-N1.7に適用し、実機xArm6+XHandで約25Hzの閉ループ再計画を実現。シミュレーションと実世界で成功率を最大23%および30%向上。

2. 先行研究と比べてどこがすごい?

従来のaction-chunking flow policiesは、大きなバックボーンと複数回のdenoisingステップにより推論が遅く、頻繁な再計画が不可能で、実行中のセンサ入力に反応できない。πR²は、per-position noise schedule(diffusion forcing)を基盤に、条件付けを高速チャネルと低速チャネルに分離し、proprioceptionには毎tick反応しつつ、視覚情報の遅延を許容する。さらに、遅延適応型flow scheduleにより、1回のdenoisingステップでアクションを生成し、ハードウェアの遅延に応じて再計画頻度を調整できる。これにより、大規模バックボーンを維持したまま、リアルタイム性とリアクティブ性を両立した点が新しい。

3. 技術・手法の肝は?

手法の核は2点。(1) 条件付けの分割: proprioception(高速チャネル)は毎tick更新され、vision-language features(低速チャネル)は非同期に更新される。これにより、chunk内でproprioceptionに反応しつつ、視覚情報の古さを許容する。(2) 遅延適応型flow schedule: 実行中のアクションをinpainting conditioningとして扱い、1回のdenoisingステップでアクションを生成する。これにより、1つの学習済みモデルが様々なハードウェア遅延に適応できる。既存のアーキテクチャへの変更は最小限で、事前学習済みポリシーからファインチューニング可能。

4. どうやって有効だと検証した?

実機xArm6+XHandプラットフォーム上のGR00T-N1.7に適用し、ベースポリシーと比較して約4倍高速な閉ループ再計画(A5000 GPUで約25Hz)を達成し、40msごとに新しい観測に基づいて行動する。シミュレーションと実世界の複数の操作タスクで、最強のベースラインと比較して成功率がシミュレーションで最大23%、実世界で最大30%向上した。

5. 議論はある?

要旨からは、提案手法の限界やトレードオフについての議論は不明。ただし、視覚情報の遅延を許容する設計であるため、視覚フィードバックが重要なタスクでは性能が低下する可能性が考えられるが、要旨には明記されていない。また、1ステップのdenoisingでアクションを生成するため、生成品質と速度のトレードオフがあるかもしれないが、詳細は不明。

6. 次に読むべき論文は?

要旨で参照されている関連研究として、diffusion forcing(per-position noise schedule)が挙げられる。また、ベースラインとしてGR00T-N1.7が挙げられている。次に読むべき論文としては、diffusion forcingの元論文や、action-chunking flow policiesの基盤となった研究(例えば、Flow MatchingやDiffusion Policy)が考えられるが、要旨からは特定の論文名は不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sungjae Park, Shubham Tulsiani

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Generalist manipulation policies increasingly take the form of action-chunking flow policies built on large pretrained backbones. Such chunks run open-loop, so the policy cannot react to sensory input arriving mid-execution, sacrificing \emph{reactivity}. Replanning more often would restore it, but the perception-to-action pipeline (a large backbone plus multiple denoising steps) is too slow: this \emph{latency} forbids frequent replanning and leaves committed actions stale, making such policies ill-suited for dynamic, closed-loop control. We present $\pi\mathbf{R}^2$, which makes these policies reactive and real-time while retaining large backbones, expressive multi-modal policies, and multi-action prediction. Built on the per-position noise schedule of diffusion forcing, $\pi\mathbf{R}^2$ contributes two ideas. First, it splits conditioning into a fast channel (proprioception, fresh every tick) and an asynchronously updated slow channel (vision-language features), so the policy reacts to proprioception within a chunk while tolerating stale vision. Second, a latency-adaptive flow schedule treats in-flight actions as inpainting conditioning and emits actions in one denoising step per call, letting one trained model adapt to varying hardware latency. Requiring minimal modification to existing architectures, $\pi\mathbf{R}^2$ can be finetuned from a pretrained policy: applied to GR00T-N1.7 on a real xArm6+XHand platform, it replans closed-loop roughly $4\times$ faster than the base policy (~$25$Hz on an A5000 GPU), acting on a fresh observation every $40$ms. Across simulation and real-world manipulation tasks, $\pi\mathbf{R}^2$ improves the success rate by up to $23\%$ in simulation and $30\%$ in the real world over the strongest baseline. Project page: https://pi-r2-flow.github.io/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI