日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

GUIエージェントarXiv:2602.00575

VAGEN: 軌跡に基づく段階的対話検証によるGUIエージェントの報酬モデリング

Agentic Reward Modeling: Verifying GUI Agent via Progressive Trajectory-Grounded Interaction

シェア:XThreadsFacebookLINEはてブBluesky

GUIエージェントの検証を、軌跡の直接証拠と環境への能動的プロービングを段階的に組み合わせて行うツール拡張型検証エージェントVAGENを提案し、OSWorldやAndroidWorldで評価精度と効率の両立を示した。

詳しい要約

1. どんなもの?

- GUIエージェントのための報酬モデリングフレームワークVAGENを提案。 - 軌跡に基づく対話的検証パラダイムを採用。 - ツール拡張された検証エージェントがProgressive Verification Mechanismに従い、表層から潜在、安価から高価へと検証を進める。 - OSWorld-VerifiedとAndroidWorldで評価。

2. 先行研究と比べてどこがすごい?

- ルールベース手法はスケーラビリティが低く、オープンエンドタスクに対応できない。 - LLM-as-a-Judgeはスケーラブルだが受動的で、部分状態観測性の制約を受ける。 - 最近の能動的環境対話手法は観測性問題を緩和するが、プロービングに過度に依存し、直接的な軌跡証拠を十分に活用しない。 - VAGENはこれらの制限を克服し、検証効率を向上。

3. 技術・手法の肝は?

- ツール拡張された検証エージェントを採用。 - Progressive Verification Mechanismにより、表層から潜在、安価から高価という設計哲学に従う。 - 軌跡証拠の抽出と環境状態のプロービングを能動的かつエンドツーエンドで行う。

4. どうやって有効だと検証した?

- OSWorld-VerifiedとAndroidWorldベンチマークで実験。 - VAGENが評価精度を大幅に改善し、性能と効率のトレードオフが良好であることを示した。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照されている研究:Rule-based methods, LLM-as-a-Judge, active environment interaction methods。 - 関連手法:RLVR (Reinforcement Learning with Verifiable Rewards)。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Chaoqun Cui, Jing Huang, Shijing Wang, Liming Zheng, Qingchao Kong, Zhixiong Zeng

分類: cs.RO

原文アブストラクト

Reinforcement learning with verifiable rewards (RLVR) provides a promising pathway for continuously advancing GUI agents, yet existing reward modeling paradigms face complementary limitations. Rule-based methods suffer from poor scalability and cannot handle open-ended tasks. LLM-as-a-Judge methods enable scalable trajectory verification but remain passive and are constrained by partial state observability, since key evidence often resides in latent environment states beyond the trajectory. Recent active environment interaction methods mitigate observability issues but tend to over-rely on probing while under-utilizing direct trajectory evidence, leading to verification inefficiency. To address these challenges, we advocate a trajectory-grounded interactive verification paradigm. We introduce VAGEN, a framework that employs a tool-augmented verifier agent governed by a Progressive Verification Mechanism, which follows a surface-to-latent and cheap-to-expensive design philosophy to extract trajectory evidence and probe environment states in a proactive end-to-end manner. Experiments on OSWorld-Verified and AndroidWorld benchmarks demonstrate that VAGEN significantly improves evaluation accuracy with a favorable performance-efficiency trade-off.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI