日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2610.20504

人間介入を活用したグラフ再重み付け行動クローニングによる高精度ロボットマニピュレーション

Graph-Reweighted Behavior Cloning with Human Interventions for Precise Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

成功・失敗・人間介入を含むロールアウトからタスク達成への到達可能性グラフを構築し、各行動チャンクの貢献度で重み付けしてVLAモデルを事後学習する手法を提案。

詳しい要約

1. どんなもの?

長期的な精密マニピュレーションでは、成功したdemonstrationやhuman intervention付きrolloutにも、回り道・ためらい・失敗試行・不完全な回復が混在し、VLAモデルのpost-training用データが混合品質になる。本論文はGraph-Reweighted Behavior Cloning (GR-BC)を提案する。これはdemonstrationと反復収集したrollout(成功・失敗・human intervention付き)上に、タスク条件付きgoal-reachability graphを構築するoffline反復post-trainingフレームワークである。

2. 先行研究と比べてどこがすごい?

従来は不完全なtrajectoryを一律にcloneするか破棄するかだった。GR-BCはreward model、action-conditioned critic、progress predictorを訓練せずに、失敗trajectoryから回復可能な区間を再利用し、human interventionを回復経路として活用し、成功trajectory内でも局所的に退行的なchunkをdown-weightする点が異なる。trajectory比較やprogress labelも不要。

3. 技術・手法の肝は?

demonstrationとrolloutからタスク条件付きgoal-reachability graphを構築する。reverse graph searchによりデータセットsupport内でのタスク成功までの最小残りステップ(potential)を計算し、各action chunkをその実行がpotentialをどれだけ減らすかで重み付けする(consequence-based weighting)。新rolloutはgraphに追加してsearchを再実行するだけで組み込める。

4. どうやって有効だと検証した?

4つの精密マニピュレーションタスクと3つのVLA backboneで評価した。GR-BCは単一ラウンドのsupervised fine-tuningを改善し、trajectory比較やprogress labelなしで、数回のoffline反復後に91%の成功率に到達した。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている具体的な先行研究は明示されていない。関連手法としてbehavior cloning、VLAモデルのpost-training、human intervention付きrollout、reward modelやaction-conditioned critic、progress predictorを用いる手法が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xiaoman Li, Zhiqiang Yang, Jiayu Hu, Jipeng Kong, Yang Zhang, Jingwei Zhang, Fangzheng Yan, Chunhua Shen, Chenjia Bai

分類: cs.RO

原文アブストラクト

Long-horizon precise manipulation produces mixed-quality data for post-training vision-language-action (VLA) models: even successful demonstrations and intervention-assisted rollouts may contain detours, hesitations, failed attempts, and imperfect recoveries. The key challenge is to identify which action chunks actually advance the task, rather than uniformly cloning or discarding imperfect trajectories. We propose Graph-Reweighted Behavior Cloning (GR-BC), an offline iterative post-training framework that builds a task-conditioned goal-reachability graph over demonstrations and iteratively collected rollouts, including both successful and failed episodes with human interventions. Reverse graph search computes minimal remaining steps to task success within the dataset support, and each action chunk is weighted by how much its execution reduces this potential. This consequence-based weighting reuses recoverable segments from failed trajectories, leverages interventions as recovery paths, and down-weights locally regressive chunks even inside successful trajectories. New rollouts are incorporated by appending them to the graph and rerunning search, without training a reward model, action-conditioned critic, or progress predictor. Across four precise manipulation tasks and three VLA backbones, GR-BC improves single-round supervised fine-tuning and reaches 91% success after a few offline iterations, without trajectory comparisons or progress labels. More details and videos are available at: https://gr-bc.github.io

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI