日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2607.15641

IMBench: 直感的ロボット操作のためのベンチマーク

IMBench: A Benchmark for Intuitive Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

人間の直感的操作能力を評価する新しいベンチマークを提案し、視覚言語モデルとVLAモデルのギャップを明らかにした。

詳しい要約

1. どんなもの?

- ロボット操作における『intuitive manipulation』を評価するベンチマークIMBENCHを提案。 - 知覚・物理推論・行動生成・反復実行を統合した能力として定義。 - 35タスク、14Kのフィルタ済みtrajectory、多様なシナリオ生成ツールを含む。 - contact-rich manipulation、tool use、multi-stage dependenciesを要求。

2. 先行研究と比べてどこがすごい?

- 既存benchmarkは物理推論と実行を分離、または明示的推論なしにpolicy性能のみ測定。 - IMBENCHは推論から実行までの統合能力を評価する点で異なる。 - 制約下での実行可能な行動列生成を要求し、より実践的。

3. 技術・手法の肝は?

- タスクはtask-relevantな物理構造の推論と、明示的制約下での実行可能行動列生成を要求。 - 35タスク、14K filtered trajectories、多様なシナリオを生成するスケーラブルなツールを提供。 - 評価はperception, physical reasoning, action generation, iterative executionを横断。

4. どうやって有効だと検証した?

- vision language models (VLMs) は部分的な物理推論を示すが実行可能なplanを生成できない。 - state-of-the-art vision-language-action models (VLAs) はタスク制約を満たし、シナリオ間で汎化することに苦戦。 - 一貫したgapを実験で明らかにした。

5. 議論はある?

- intuitive manipulationが現在のfoundation modelsとgeneralist robot policiesに欠けた軸であると指摘。 - IMBENCHをより統合的で適応的なphysical intelligenceの評価・実現への一歩と位置づけ。 - 具体的な議論の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法としてvision language models (VLMs) やvision-language-action models (VLAs) が挙げられる。 - 同分野の定番としてrobotic manipulation benchmarksやphysical reasoning benchmarksが考えられるが、具体名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Anurag Maurya, Sukhvansh Jain, Prajwal Avhad, Gautham Balachandran, Ziyi Zhou, Atharva Kshirsagar, Satyam Singh, Bowen Li. Rishabh Mukund, Ritul Singh, Jatin Vira, Suvonil Chatterjee, Devesh K. Jha

分類: cs.RO, cs.AI

原文アブストラクト

Humans combine reasoning and motor control to solve complex manipulation tasks under diverse constraints. They build an understanding of the physical world that helps them convert reasoning into actions and quickly adapt to new scenes, tasks, and rules. We refer to this capability as intuitive manipulation. Existing benchmarks fail to capture this integration: they evaluate physical reasoning in isolation from execution, or measure policy performance without requiring explicit reasoning. We introduce IMBENCH, a benchmark designed to evaluate intuitive manipulation as an integrated capability spanning perception, physical reasoning, action generation, and iterative execution. Our tasks require models to infer task-relevant physical structure and generate feasible action sequences under explicit constraints, including contact-rich manipulation, tool use, and multi-stage dependencies. We introduce a benchmark of 35 tasks, 14K filtered trajectories, and scalable tools for generating diverse scenarios. Experiments reveal a consistent gap: vision language models show partial physical reasoning ability but fail to produce executable plans, while state-of-the-art vision-language-action models struggle to satisfy task constraints and generalize across scenarios. These results identify intuitive manipulation as a missing axis in current foundation models and generalist robot policies, and position IMBENCH as a step toward evaluating and enabling more integrated, adaptive physical intelligence.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI