日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

物体ナビゲーションarXiv:2509.19843

PersONAL: パーソナライズされた身体性エージェントのための包括的ベンチマーク

PersONAL: Towards a Comprehensive Benchmark for Personalized Embodied Agents

シェア:XThreadsFacebookLINEはてブBluesky

家庭内で「リリーのリュックを探して」のような個人固有の物体を探索・特定するパーソナライズ身体性AIのベンチマークを提案し、既存手法と人間の性能差を明らかにした。

詳しい要約

1. どんなもの?

- PersONAL(PERSonalized Object Navigation And Localization)という新しいbenchmarkの提案 - Embodied AIにおけるpersonalization(個別ユーザの好みや行動のモデリング)を研究する包括的benchmark - エージェントは「find Lily's backpack」のような自然言語queryに対し、特定ユーザに紐づく物体を同定・取得・ナビゲートする必要がある - HM3D datasetの30以上のphotorealisticな家庭環境から2,000以上の高品質episodeで構成 - 各episodeには物体と所有者の明示的関連を含む自然言語のscene descriptionが付与 - 2つの評価モードをサポート:(1) unseen環境でのactive navigation、(2) mapping済みsceneでのobject grounding

2. 先行研究と比べてどこがすごい?

- 従来のEmbodied AIは複雑タスクや多様環境への適応が進む一方、家庭などの人間中心の現実的シナリオへの展開が困難 - 特に個々の人間のpreferenceやbehaviorのmodelingが課題であった - PersONALはpersonalizationという観点をEmbodied AIのbenchmarkとして体系的に扱う点が新しい - 物体と所有者の関連を自然言語で明示し、user-specific semanticsのreasoningを要求する点が特徴 - 具体的な先行研究名との比較は要旨からは不明

3. 技術・手法の肝は?

- HM3D datasetの30以上のphotorealistic homesから2,000以上のepisodeを構築 - 各episodeに物体と所有者の明示的関連を含む自然言語scene descriptionを付与 - エージェントは自然言語query(例:find Lily's backpack)に基づき対象物体を同定・取得・ナビゲート - user-specific semanticsのreasoningを要求する設計 - 2つの評価モード:unseen環境でのactive navigationと、mapping済みsceneでのobject grounding - 詳細なアルゴリズムやモデル構成は要旨からは不明

4. どうやって有効だと検証した?

- state-of-the-art baselinesを用いた実験を実施 - 結果としてhuman performanceとの間に大きなgapがあることを示した - このgapはpersonalized情報のperceive・reason・memoryを扱えるembodied agentの必要性を示唆 - 具体的なbaseline名や評価指標の詳細は要旨からは不明

5. 議論はある?

- 実験によりhuman performanceとのsubstantialなgapが明らかになった - personalized情報のperceiving・reasoning・memorizingができるembodied agentの必要性を強調 - 現実のassistive robotへの道を開くことを目指す - 具体的な限界や今後の課題の詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- HM3D dataset(本benchmarkの基盤データセット) - Object NavigationおよびObject Groundingの関連研究 - Embodied AIにおけるpersonalization関連の先行研究(具体的名称は要旨からは不明) - 要旨で参照されているstate-of-the-art baselinesの原論文

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Filippo Ziliotto, Jelin Raphael Akkara, Alessandro Daniele, Lamberto Ballan, Luciano Serafini, Tommaso Campari

分類: cs.CV, cs.RO

原文アブストラクト

Recent advances in Embodied AI have enabled agents to perform increasingly complex tasks and adapt to diverse environments. However, deploying such agents in realistic human-centered scenarios, such as domestic households, remains challenging, particularly due to the difficulty of modeling individual human preferences and behaviors. In this work, we introduce PersONAL (PERSonalized Object Navigation And Localization, a comprehensive benchmark designed to study personalization in Embodied AI. Agents must identify, retrieve, and navigate to objects associated with specific users, responding to natural-language queries such as "find Lily's backpack". PersONAL comprises over 2,000 high-quality episodes across 30+ photorealistic homes from the HM3D dataset. Each episode includes a natural-language scene description with explicit associations between objects and their owners, requiring agents to reason over user-specific semantics. The benchmark supports two evaluation modes: (1) active navigation in unseen environments, and (2) object grounding in previously mapped scenes. Experiments with state-of-the-art baselines reveal a substantial gap to human performance, highlighting the need for embodied agents capable of perceiving, reasoning, and memorizing over personalized information; paving the way towards real-world assistive robot.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI