日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2610.19262

MIND: 指示条件付き依存関係によるロボットの漸進的グラウンディング

MIND: Instruction-Conditioned Incremental Grounding for Robots

シェア:XThreadsFacebookLINEはてブBluesky

言語指示を依存関係にコンパイルし、環境変化時に影響を受ける判断だけを更新することで、全再計算と同じ意思決定を保ちながら意味評価回数を削減するフレームワークを提案。

詳しい要約

1. どんなもの?

MIND(Maintenance via INstruction-conditioned Dependencies)は、ロボットが持続的な言語指示に従う際、環境変化に応じてキャッシュされた部屋判断のうちどれが有効かを維持するフレームワーク。各イベント後に全部屋を再評価せず、指示を依存関係にコンパイルして影響範囲のみ更新する。

2. 先行研究と比べてどこがすごい?

従来はイベントごとに全roomを再評価するfull recomputationが前提だった。MINDはsemantic dependenciesとevent footprintsの交差により、固定決定論的評価・計画・選択の下で保守的カバレッジが全再計算の決定を保持しつつ、平均semantic evaluationsを30.6から11.2へ削減。

3. 技術・手法の肝は?

language modelが各指示をsemantic qualificationとtarget selectionの依存関係にコンパイル。controllerがsemantic dependenciesとevent footprintsを交差させ、影響を受ける判断のみrefresh。reachabilityとselectionは別々に更新。保守的dependency/footprint coverageで全再計算と同一決定を保証。

4. どうやって有効だと検証した?

240の5-event ProcTHOR系列とexact benchmark predicateで、1,200のpost-event decisionsを全て保持しつつ平均評価を30.6→11.2に削減。Phi-4とQwen3-14Bのfrozen-evaluator実験でも1,200決定を保持(タスク精度は向上せず)。32のclosed-loop AI2-THORエピソードでfull recomputationの最終target decisionと全一致。Unitree G1でroom遷移間のtarget reuse/reselectionと、barrier・object removal後のabstentionを4評価(15〜18に対し)で実証。

5. 議論はある?

frozen-evaluator実験では決定は保持されるがevaluator自体のタスク精度は向上しない点が議論。また固定決定論的評価・計画・選択の仮定下での保守的保証であり、非決定論的設定への一般化は要旨からは不明。

6. 次に読むべき論文は?

ProcTHOR、AI2-THOR、Phi-4、Qwen3-14B、Unitree G1に関連する研究。特にinstruction-conditioned groundingやincremental semantic evaluation、closed-loop robot instruction followingの先行手法。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Mohamed Abouagour, Junhyun Nam, Wonse Jo, Byung-Cheol Min

分類: cs.RO, cs.AI

原文アブストラクト

Robots following persistent language instructions must decide which cached room judgments remain valid as their environment changes. We present MIND (Maintenance via INstruction-conditioned Dependencies), a framework for maintaining target-room decisions without re-evaluating every room after each event. A language model compiles each instruction into dependencies for semantic qualification and target selection. The controller intersects semantic dependencies with event footprints, refreshes affected judgments, and updates reachability and selection separately. For fixed deterministic evaluation, planning, and selection, conservative dependency and footprint coverage preserves the decisions of full recomputation. On 240 five-event ProcTHOR sequences with an exact benchmark predicate, MIND reduces mean semantic evaluations from 30.6 to 11.2 while preserving all 1,200 post-event decisions. Frozen-evaluator experiments with Phi-4 and Qwen3-14B also preserve all 1,200 decisions, without improving the evaluators' underlying task accuracy. In 32 closed-loop AI2-THOR episodes using exact-predicate qualification and metadata-derived footprints, MIND matches the final target decision of full recomputation in every episode. Unitree G1 experiments demonstrate target reuse and reselection across room transitions without additional semantic evaluations under MIND, and abstention after a barrier and an object removal at 4 evaluations against 15 to 18. Additional materials are available at https://mind-icra27.github.io/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI