CleanUpBench：実環境に即した掃き掃除と把持の身体性AIベンチマーク

- CleanUpBench は、屋内清掃タスクにおける embodied agent を評価するための再現可能かつ拡張可能な benchmark。 - NVIDIA Isaac Sim 上に構築され、sweeping mechanism と 6-DoF robotic arm を備えた mobile service robot をシミュレートする。 - 異種物体とのインタラクションを含む、構造化された multi-target cleaning タスクを対象とする。 - 手設計の環境に加え、generalization を評価するための procedurally generated layout を 1 つ含む。 - 評価 suite は task completion、spatial efficiency、motion quality、control performance を網羅する。

- 既存の embodied AI benchmark は navigation、manipulation、reasoning を扱うが、多くは複雑な humanoid agent や大規模 simulation を対象とし、実世界展開から遠い。 - 一方、sweeping と grasping の dual mode 能力を持つ mobile cleaning robot は現実的かつ商業的に有望な platform として台頭している。 - しかし、構造化された multi-target cleaning タスクでこうした agent を体系的に評価する benchmark は存在せず、学術研究と実応用の間にギャップがある。 - CleanUpBench はこのギャップを埋め、low-level skill evaluation と full-scene testing の間を橋渡しする scalable testbed を提供する点が新しい。

- NVIDIA Isaac Sim を用い、sweeping mechanism と 6-DoF robotic arm を搭載した mobile service robot をシミュレートする。 - 異種物体とのインタラクションを可能にする環境設計を採用する。 - 手設計の環境と、generalization 評価用の procedurally generated layout を組み合わせる。 - 評価 suite は task completion、spatial efficiency、motion quality、control performance の観点を含む。 - 比較研究のため、heuristic strategies と map-based planning に基づく baseline agents を提供する。

- 要旨からは不明。 - ただし、手設計環境と procedurally generated layout を用いて generalization を評価する設計や、task completion、spatial efficiency、motion quality、control performance を含む評価 suite、heuristic strategies と map-based planning に基づく baseline agents の提供が述べられている。

- 要旨からは不明。 - ただし、mobile cleaning robot が現実的かつ商業的に有望な platform である一方、既存 benchmark が humanoid agent や大規模 simulation に偏り実世界展開から遠いという課題が背景として述べられている。 - CleanUpBench が low-level skill evaluation と full-scene testing のギャップを橋渡しする scalable testbed として位置づけられている。

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法として、heuristic strategies と map-based planning に基づく baseline agents が挙げられている。 - 同分野の定番として、embodied AI の navigation・manipulation・reasoning benchmark や、NVIDIA Isaac Sim を用いた simulation benchmark を参照することが考えられる。