日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

身体性計画arXiv:2508.03232

CookBench: 複雑な料理シナリオにおける長期的身体性計画ベンチマーク

CookBench: A Long-Horizon Embodied Planning Benchmark for Complex Cooking Scenarios

シェア:XThreadsFacebookLINEはてブBluesky

高忠実度Unityシミュレータ上で、ユーザ意図の認識と長期的・細粒度の身体動作による料理遂行を評価するベンチマークを提案。

詳しい要約

1. どんなもの?

- 複雑な料理シナリオにおける long-horizon embodied planning のベンチマーク CookBench を提案 - 高忠実度シミュレーション環境を Unity game engine 上に構築 - 中核タスクは二段階 - Intention Recognition: ユーザの複雑な意図を正確に解析 - Embodied Interaction: 特定した cooking goal を long-horizon かつ fine-grained な物理行動列で実行 - 行動粒度を spatial level に細分化し、低レベル robotic control は抽象化 - simulator を包む包括的 toolset と unified API を提供

2. 先行研究と比べてどこがすごい?

- 既存の embodied planning ベンチマークは short-horizon タスクと粗い action primitives が中心 - CookBench は long-horizon かつ fine-grained な行動列を要求 - 行動粒度を spatial level まで細分化しつつ、低レベル robotic control を抽象化する点が異なる - 複雑で現実的な環境における frontier AI 課題を定義 - 具体的な先行研究名や定量比較は要旨からは不明

3. 技術・手法の肝は?

- Unity game engine による高忠実度シミュレーション環境 - 二段階タスク設計 - Intention Recognition で複雑な意図を解析 - Embodied Interaction で cooking goal を long-horizon な行動列として実行 - 行動粒度は重要な操作情報を考慮した spatial level に設定 - simulator を包む toolset と unified API - macro-level operations: 注文、食材購入など - fine-grained embodied actions: 物理インタラクション用 - 高レベル planning と意思決定に集中できる設計

4. どうやって有効だと検証した?

- state-of-the-art の closed-source Large Language Model と Vision-Language Model を詳細に分析 - 複雑で long-horizon なタスクに対する主要な短所と課題を明らかにしたと報告 - 具体的な評価指標、被験モデル名、実験設定、定量結果は要旨からは不明

5. 議論はある?

- 現行の closed-source LLM/VLM が複雑な long-horizon タスクで抱える短所と課題を指摘 - 行動粒度を spatial level に抽象化する設計上の妥当性や限界は要旨からは不明 - 実ロボットへの転移や sim-to-real の議論は要旨からは不明 - ベンチマーク全体は今後 open-source 化予定と記載

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な先行研究は明示されていない - 関連手法として embodied planning ベンチマーク、long-horizon planning、Vision-Language Model を用いた embodied agent 研究を挙げる - 同分野の定番として ALFRED、ALFWorld、VirtualHome などの embodied ベンチマークを一般名として挙げる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Muzhen Cai, Xiubo Chen, Yining An, Jiaxin Zhang, Xuesong Wang, Wang Xu, Weinan Zhang, Ting Liu

分類: cs.RO

原文アブストラクト

Embodied Planning is dedicated to the goal of creating agents capable of executing long-horizon tasks in complex physical worlds. However, existing embodied planning benchmarks frequently feature short-horizon tasks and coarse-grained action primitives. To address this challenge, we introduce CookBench, a benchmark for long-horizon planning in complex cooking scenarios. By leveraging a high-fidelity simulation environment built upon the powerful Unity game engine, we define frontier AI challenges in a complex, realistic environment. The core task in CookBench is designed as a two-stage process. First, in Intention Recognition, an agent needs to accurately parse a user's complex intent. Second, in Embodied Interaction, the agent should execute the identified cooking goal through a long-horizon, fine-grained sequence of physical actions. Unlike existing embodied planning benchmarks, we refine the action granularity to a spatial level that considers crucial operational information while abstracting away low-level robotic control. Besides, We provide a comprehensive toolset that encapsulates the simulator. Its unified API supports both macro-level operations, such as placing orders and purchasing ingredients, and a rich set of fine-grained embodied actions for physical interaction, enabling researchers to focus on high-level planning and decision-making. Furthermore, we present an in-depth analysis of state-of-the-art, closed-source Large Language Model and Vision-Language Model, revealing their major shortcomings and challenges posed by complex, long-horizon tasks. The full benchmark will be open-sourced to facilitate future research.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI