ロボット言語グラウンディングのサーベイ:記号と埋め込みのトレードオフ
A Survey of Robotic Language Grounding: Tradeoffs between Symbols and Embeddings
言語とロボット行動の対応付け手法を、手動定義の記号表現と高次元埋め込みの両極から整理し、利点と課題、今後の方向性を論じたサーベイ。
著者: Vanya Cohen, Jason Xinyu Liu, Raymond Mooney, Stefanie Tellex, David Watkins
分類: cs.RO, cs.AI, cs.CL
原文アブストラクト
With large language models, robots can understand language more flexibly and more capable than ever before. This survey reviews and situates recent literature into a spectrum with two poles: 1) mapping between language and some manually defined formal representation of meaning, and 2) mapping between language and high-dimensional vector spaces that translate directly to low-level robot policy. Using a formal representation allows the meaning of the language to be precisely represented, limits the size of the learning problem, and leads to a framework for interpretability and formal safety guarantees. Methods that embed language and perceptual data into high-dimensional spaces avoid this manually specified symbolic structure and thus have the potential to be more general when fed enough data but require more data and computing to train. We discuss the benefits and tradeoffs of each approach and finish by providing directions for future work that achieves the best of both worlds.
関連論文
- どっち?物体間の文脈と複数視点を活用した言語グラウンディング言語グラウンディング
- 言語グラウンディングにおける信頼:人間とロボットのチームに向けた新たなAI課題言語グラウンディング
- 領域別動的レイヤーアテンションによる層融合を用いた自動運転車のコマンドグラウンディング言語グラウンディング
- ジェスチャーと言語理解を組み合わせた屋内ロボットの認知共有型ナビゲーション言語グラウンディング
- 視覚知覚に基づく言語獲得のためのニューラル変分学習言語グラウンディング
- 時間的グラウンディンググラフによる視覚言語文脈を蓄積した言語理解言語グラウンディング
