日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2509.19571

エージェント的シーンポリシー:ロボット行動のための空間・意味・アフォーダンスの統合

Agentic Scene Policies: Unifying Space, Semantics, and Affordances for Robot Action

シェア:XThreadsFacebookLINEはてブBluesky

シーン表現をロボットと世界の問い合わせ可能なインターフェースとして用い、言語指示に基づく行動をゼロショットで計画するエージェントフレームワークASPを提案。

詳しい要約

1. どんなもの?

- オープンエンドな自然言語クエリを実行するロボットポリシー - 名称: Agentic Scene Policies (ASP) - 明示的な scene representation をロボットと世界の間の queryable interface として設計 - クエリ結果を下流の motion planning の誘導に利用 - 言語条件付きロボットポリシーの agentic framework - 現代の scene representation が持つ semantic / spatial / affordance ベースのクエリ能力を活用

2. 先行研究と比べてどこがすごい?

- 先行: imitation learning や vision-language-actions models (VLAs) による end-to-end ポリシー - 複雑な指示や新しい scene で苦戦する課題 - ASP の利点 - 明示的な scene representation を介したクエリで複雑指示に対応 - open-vocabulary クエリを zero-shot で実行 - 複雑な skill では object affordances を明示的に推論 - 定量的な優位性の詳細は要旨からは不明

3. 技術・手法の肝は?

- 核となる考え方 - scene representation を queryable interface として明示的に設計 - クエリ結果を motion planning に渡して行動を誘導 - agentic framework としての構成 - semantic / spatial / affordance ベースのクエリを組み合わせ - 複雑な skill では object affordances を明示的に推論 - affordance-guided navigation により room-level クエリにも対応 - scaled-up な scene representation を利用 - 個々のモジュール詳細は要旨からは不明

4. どうやって有効だと検証した?

- tabletop manipulation 問題で VLAs と比較する extensive experiments を実施 - room-level クエリへの適用を実証 - affordance-guided navigation を用いる - scaled-up な scene representation を用いる - 具体的なベンチマーク名・指標・数値は要旨からは不明

5. 議論はある?

- 要旨からは不明 - 限界や失敗ケースの議論は明示されていない - 示唆される論点 - 明示的 scene representation と end-to-end VLAs の比較 - zero-shot での open-vocabulary クエリ性能 - affordance 推論の一般性

6. 次に読むべき論文は?

- 要旨で比較対象として挙げられている vision-language-actions models (VLAs) - imitation learning 系の end-to-end ポリシー - scene representation を用いたクエリベースのロボットポリシー関連研究 - affordance-guided navigation 関連研究 - 個別の論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sacha Morin, Kumaraditya Gupta, Mahtab Sandhu, Charlie Gauthier, Francesco Argenziano, Kirsty Ellis, Liam Paull

分類: cs.RO, cs.CV

原文アブストラクト

Executing open-ended natural language queries is a core problem in robotics. While recent advances in imitation learning and vision-language-actions models (VLAs) have enabled promising end-to-end policies, these models struggle when faced with complex instructions and new scenes. An alternative is to design an explicit scene representation as a queryable interface between the robot and the world, using query results to guide downstream motion planning. In this work, we present Agentic Scene Policies (ASP), an agentic framework that leverages the advanced semantic, spatial, and affordance-based querying capabilities of modern scene representations to implement a capable language-conditioned robot policy. ASP can execute open-vocabulary queries in a zero-shot manner by explicitly reasoning about object affordances in the case of more complex skills. Through extensive experiments, we compare ASP with VLAs on tabletop manipulation problems and showcase how ASP can tackle room-level queries through affordance-guided navigation, and a scaled-up scene representation. (Project page: https://montrealrobotics.ca/agentic-scene-policies.github.io/)

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI