日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2609.23131

部分観測下での言語誘導物体検索のための選択的コミットメント

Selective Commitment for Language-Guided Object Retrieval under Partial Observability

シェア:XThreadsFacebookLINEはてブBluesky

言語指示に基づく物体検索において、情報収集・把持・棄権の判断を統合する閉ループ枠組みを提案し、シミュレーションと実機で有効性を示した。

詳しい要約

1. どんなもの?

- 言語指示に基づく物体検索を部分的観測下で行う閉ループフレームワーク。 - 参照コンテナとの関係で指定されたターゲットを検索。 - 証拠収集、シーンとのインタラクション、候補の把持、棄権の判断を調整。 - ターゲット同一性、コンテナ関係、存在性に関する持続的なjoint beliefを維持。 - tracked-object、unobserved-target、target-absentの仮説を保持。

2. 先行研究と比べてどこがすごい?

- 5つのシナリオで提案手法は19/25成功、最良のタスク適応ベースラインは12/25。 - 各シナリオで少なくとも1回成功した唯一の評価ポリシー。 - 部分的観測下での証拠収集と選択的把持コミットメントを統合フレームワークで調整可能なことを示す。

3. 技術・手法の肝は?

- 視点条件付きカテゴリカルVLM観測がjoint beliefを更新。 - conformal grasp eligibilityとrobot feasibilityがコミットメントを統制。 - 有限ホライズンbelief-space planningが情報収集行動を選択。 - 閉ループで再観測や自律回復を可能にする。

4. どうやって有効だと検証した?

- 5つのシナリオでシミュレーション評価を実施。 - アブレーションでcross-view memoryが部分的遮蔽下での成功を改善。 - 実機トライアルで閉ループ再観測と把持失敗からの自律回復を実証。 - 視点失敗注入時はfalse deferで終了。

5. 議論はある?

- 完全システムは簡略化変種を一貫して上回るわけではない。 - 視点失敗注入時はfalse deferが生じる。 - 部分的観測下での検索における証拠収集と選択的把持コミットメントの調整の実現可能性を示す。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法としてVLM、conformal prediction、belief-space planning、部分的観測下での物体検索に関する研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wonhee Koh, Sushil Samuel Dinesh, Hansol Ko, Shinkyu Park, Eungjoo Lee

分類: cs.RO

原文アブストラクト

Language-guided object retrieval under partial observability requires deciding whether to gather more evidence, interact with the scene, grasp a candidate, or abstain. We present a closed-loop framework that coordinates these decisions for retrieving a target specified in relation to a reference container. The framework maintains a persistent joint belief over target identity, container relation, and presence through tracked-object, unobserved-target, and target-absent hypotheses. View-conditioned categorical VLM observations update this belief; conformal grasp eligibility and robot feasibility govern commitment, while finite-horizon belief-space planning selects information-gathering actions. Across five different scenarios, our proposed method succeeds in 19/25 simulation episodes versus 12/25 for the best-performing task-adapted baseline and is the only evaluated policy to achieve at least one success in each scenario. Ablations show that cross-view memory improves success under partial occlusion, while the full system does not consistently outperform simplified variants. Real-robot trials demonstrate closed-loop re-observation and autonomous recovery from injected grasp failures, while injected viewpoint failures end in false defer. Experimental results demonstrate the feasibility of coordinating evidence gathering and selective grasp commitment within a unified framework for retrieval under partial observability.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5Google DeepMind、ロボット向けAIを発表新製品・発表

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI