日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2609.33049

オンライン対話はリカバリに必要か?摂動によるロバスト計画のミニマリストアプローチ

Is Online Interaction Necessary for Recovery? A Minimalist Approach to Robust Planning via Perturbation

シェア:XThreadsFacebookLINEはてブBluesky

既存のデモのみを用いて、予測軌道の後半部分を元のデモに固定しつつ前半を自由にすることで、摂動状態からのリカバリを学習するPARSを提案。追加の環境対話や専門家なしで行動クローンのロバスト性を向上。

詳しい要約

1. どんなもの?

- 行動クローン(BC)におけるcovariate shift問題に対処するための、Perturbation-Augmented Recovery Supervision(PARS)という訓練手法を提案。 - 既存のデモンストレーションのみを用いて、ロボットの固有受容感覚状態を摂動させ、予測軌道の後半部分のみを元のデモンストレーションに固定し、前半部分を自由に修正動作の生成に割り当てる。 - 追加の環境相互作用や専門家への問い合わせを必要とせず、様々な行動系列ポリシークラスに適用可能。 - 51のRLBench操作タスクで、flow-based、transformer-based、diffusion-basedポリシーに対して有効性を検証。

2. 先行研究と比べてどこがすごい?

- 従来のcovariate shift対策は、追加の修正デモンストレーションの収集や環境との追加相互作用、専門家ポリシーへのアクセスに依存していた。 - PARSは既存のデモンストレーションのみを使用し、追加の環境相互作用や専門家クエリを必要としない。 - 従来の入力ノイズ拡張は予測ホライズン全体で元の監督ターゲットを保持するが、PARSは摂動状態からの回復のための軌道レベル監督を明示的に提供する点で異なる。

3. 技術・手法の肝は?

- PARSは、ロボットの固有受容感覚状態を摂動させ、予測軌道の後半部分のみを元のデモンストレーションにアンカーし、前半部分を自由に修正動作の生成に割り当てる。 - これにより、計画ホライズン内でデモンストレーションされた行動に向かって回復するための修正動作を生成することを学習する。 - 既存のBC目的関数に minor modifications を加えるだけで、様々な行動系列ポリシークラス(flow-based、transformer-based、diffusion-based)に適用可能。

4. どうやって有効だと検証した?

- 51のRLBench操作タスクにおいて、flow-based、transformer-based、diffusion-basedポリシーを用いて実験を実施。 - 閉ループ実行中のcovariate shiftに対するロバスト性が向上することを示した。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:Behavior cloning (BC)、covariate shift対策の既存手法(追加の修正デモンストレーション収集など)、入力ノイズ拡張(input-noise augmentation)。 - 関連手法:flow-based、transformer-based、diffusion-basedポリシー。 - データセット:RLBench。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Bumgeun Park, Donghwan Lee

分類: cs.RO

原文アブストラクト

Behavior cloning (BC) is vulnerable to covariate shift during closed-loop execution, where small prediction or execution errors can drive the robot toward states poorly covered by the demonstration data. We focus on action-sequence planning, where a policy predicts a finite-horizon sequence of actions as a reference trajectory for robot execution. Existing approaches to covariate shift often rely on collecting additional corrective demonstrations, requiring further environment interaction and access to an expert or reference policy. We propose Perturbation-Augmented Recovery Supervision (PARS), a simple training approach for improving recovery using only existing demonstrations. PARS perturbs the robot's proprioceptive state and anchors only the later portion of the predicted trajectory to the original demonstration, leaving the earlier portion free to generate corrective motion and recover toward the demonstrated behavior within the planning horizon. Unlike conventional input-noise augmentation, which preserves the original supervision target over the entire prediction horizon, PARS explicitly provides trajectory-level supervision for recovery from perturbed states. PARS requires neither additional environment interaction nor expert queries and can be instantiated across different action-sequence policy classes with only minor modifications to their BC objectives. Experiments on 51 RLBench manipulation tasks with flow-based, transformer-based, and diffusion-based policies demonstrate that PARS improves robustness to covariate shift during closed-loop execution.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5Google DeepMind、ロボット向けAIを発表新製品・発表

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI