日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

操作arXiv:2606.21572

細部にこだわるロボット批評家

Robot Critics that Sweat the Small Stuff

シェア:XThreadsFacebookLINEはてブBluesky

ロボット操作の成功と失敗を細かく見分ける批評家を、成功・失敗ロールアウトからペアの進捗監視で微調整し、候補行動の選択精度を向上させた。

詳しい要約

1. どんなもの?

- 大規模 vision-language model (VLM) を critic として活用し、ロボット政策を成功に導く手法。 - 閉ループのロボット manipulation では成功と失敗の小さな視覚差の判定が難しく、これを改善するために critic を fine-tune する。 - 政策から得た success/failure rollouts を用いて pairwise progress supervision を構築。 - fine-tuned critic は細粒度の progress reasoning と微妙な failure detection に優れる。 - action-conditioned video model で候補行動の視覚効果を予測し、critic が成功候補を選択。 - 実世界タスクで平均政策成功率を 11%、シミュレーションで 5.9% 向上。

2. 先行研究と比べてどこがすごい?

- 従来の progress reasoning baseline を上回る性能を達成。 - 既存の VLM ベース critic は閉ループ manipulation における小さな視覚差の判定が苦手だったが、本手法は fine-tuning によりこれを克服。 - 具体的な先行研究名は要旨からは不明。

3. 技術・手法の肝は?

- 政策から得られた success と failure の rollouts を用いて pairwise progress supervision を構築し、critic を fine-tune。 - action-conditioned video model を利用して、政策からサンプリングした複数の候補行動の視覚効果を予測。 - fine-tuned critic が候補の中から成功につながる行動を正しく識別し、実行する。

4. どうやって有効だと検証した?

- 実世界タスクとシミュレーションタスクの両方で評価。 - 実世界タスクでは平均政策成功率が 11% 向上。 - シミュレーションタスクでは 5.9% 向上。 - 先行の progress reasoning baseline と比較して優位性を確認。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な研究名は不明。 - 同分野の関連手法として、vision-language model (VLM) を critic に用いる研究、progress reasoning、action-conditioned video model を用いたロボット manipulation の研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sruthi Sudhakar, Junbang Liang, Sreehari Rammohan, Pavel Tokmakov, Richard Zemel, Carl Vondrick

分類: cs.RO

原文アブストラクト

Large vision-language models contain several priors about the world and object interactions, making them useful critics during inference to steer robot policies towards success. However, closed-loop robot manipulation requires judging small visual differences between success and failure, which remains a challenge for current VLMs. We introduce a method to fine-tune critics by constructing pairwise progress supervision using success and failure rollouts obtained from a policy. Our fine-tuned critic excels at fine-grained progress reasoning and subtle failure detection, outperforming prior progress reasoning baselines. Additionally, we use an action-conditioned video model to predict the visual effect of several candidate actions sampled from a policy, and show that our critic can correctly identify successful candidates to execute, improving the average policy success rate by 11% across real-world tasks and 5.9% across simulation tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI