日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2601.14622

視覚言語モデルによる社会的規範に沿ったロボットナビゲーションのためのプロンプト設計の探求

Probing Prompt Design for Socially Compliant Robot Navigation with Vision Language Models

シェア:XThreadsFacebookLINEはてブBluesky

社会的規範に沿ったロボットナビゲーションにおいて、小型視覚言語モデル(VLM)の性能を引き出すプロンプト設計を、システム指示と動機づけの枠組みの2軸で検討し、競争相手の設定や微調整との相互作用を実験的に明らかにした。

詳しい要約

1. どんなもの?

- 社会的に適合したロボットナビゲーションのためのVision Language Models (VLMs) におけるプロンプト設計を研究。 - システムガイダンス(action-focused, reasoning-oriented, perception-reasoning)と動機付けフレーミング(人間、他のAI、過去の自分との競争)の2次元で検討。 - 2つの社会的ナビゲーションデータセットで実験。

2. 先行研究と比べてどこがすごい?

- 既存のベンチマークは社会的に適合した行動のための原理的なプロンプト設計をほとんど考慮していない。 - 小規模VLMsは大規模言語モデルより意思決定能力が弱く、効果的なプロンプト設計が重要。 - 本研究は認知理論に基づきプロンプト設計を体系的に分析。

3. 技術・手法の肝は?

- プロンプト設計をシステムガイダンスと動機付けフレーミングの2軸で分類。 - システムガイダンス:action-focused, reasoning-oriented, perception-reasoning。 - 動機付けフレーミング:人間との競争、他のAIとの競争、過去の自分との競争。 - 非ファインチューニングのGPT-4oとファインチューニングモデルで比較。

4. どうやって有効だと検証した?

- 2つの社会的に適合したナビゲーションデータセットで実験。 - 非ファインチューニングGPT-4oでは人間との競争が最高性能、他のAIとの競争が最低性能。 - ファインチューニングモデルでは過去の自分との競争が最強、次に人間との競争。 - プロンプト設計、モデル選択、データセット特性間の結合効果を確認。

5. 議論はある?

- 不適切なシステムプロンプト設計は直接ファインチューニングと比べても性能を大幅に低下させる。 - 直接ファインチューニングは知覚、予測、推論などの意味レベル指標を改善するが、行動精度の向上は限定的。 - システムプロンプトは行動精度を不釣り合いに大きく改善し、決定レベルの制約として作用。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:GPT-4o、ファインチューニングモデル、社会的ナビゲーションデータセット。 - 関連手法:Vision Language Models (VLMs)、Large Language Models (LLMs)。 - 同分野の定番:social robot navigation, prompt design, cognitive theories of human learning and motivation。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ling Xiao, Toshihiko Yamasaki

分類: cs.RO

原文アブストラクト

Language models are increasingly used for social robot navigation, yet existing benchmarks largely overlook principled prompt design for socially compliant behavior. This limitation is particularly relevant in practice, as many systems rely on small vision language models (VLMs) for efficiency. Compared to large language models, small VLMs exhibit weaker decision-making capabilities, making effective prompt design critical for accurate navigation. Inspired by cognitive theories of human learning and motivation, we study prompt design along two dimensions: system guidance (action-focused, reasoning-oriented, and perception-reasoning prompts) and motivational framing, where models compete against humans, other AI systems, or their past selves. Experiments on two socially compliant navigation datasets reveal three key findings. First, for non-finetuned GPT-4o, competition against humans achieves the best performance, while competition against other AI systems performs worst. For finetuned models, competition against the model's past self yields the strongest results, followed by competition against humans, with performance further influenced by coupling effects among prompt design, model choice, and dataset characteristics. Second, inappropriate system prompt design can significantly degrade performance, even compared to direct finetuning. Third, while direct finetuning substantially improves semantic-level metrics such as perception, prediction, and reasoning, it yields limited gains in action accuracy. In contrast, our system prompts produce a disproportionately larger improvement in action accuracy, indicating that the proposed prompt design primarily acts as a decision-level constraint rather than a representational enhancement.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI