日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2509.11868

成長する視点:大規模言語モデルを用いた身体化された視点取得と内的ナラティブ発達のモデリング

Growing Perspectives: Modelling Embodied Perspective Taking and Inner Narrative Development Using Large Language Models

シェア:XThreadsFacebookLINEはてブBluesky

LLMとReActを組み合わせ、Selmanの発達段階に沿った視点取得をシミュレートするPerspActシステムを拡張ディレクター課題で評価し、内的ナラティブが協調行動に与える影響を分析した。

詳しい要約

1. どんなもの?

- LLM を用いて embodied perspective taking と inner narrative の発達段階をモデル化する研究 - PerspAct system を対象に、ReAct (Reason and Act) パラダイムと LLM を統合 - Selman's theory に基づく perspective taking の発達段階をシミュレート - extended director task で GPT の内部ナラティブ生成と協調性能を評価

2. 先行研究と比べてどこがすごい?

- 言語と embodied perspective taking の両方を扱う計算モデルは少ないと指摘 - 両者を同時に扱う点が先行研究との差異 - PerspAct system を Selman's theory の発達段階と結びつける点が特徴 - 具体的な先行研究との性能比較は要旨からは不明

3. 技術・手法の肝は?

- ReAct (Reason and Act) パラダイムを LLM に統合した PerspAct system を利用 - Selman's theory の発達段階に沿った内部ナラティブを GPT に生成させる - extended director task を用いて協調課題を実施 - 生成されたナラティブが action selection と task efficiency に与える影響を評価

4. どうやって有効だと検証した?

- extended director task で GPT の内部ナラティブ生成を評価 - 指定した発達段階と整合するナラティブを生成できるかを確認 - 協調性能を定性的 (action selection) と定量的 (task efficiency) に評価 - 課題実行前は発達段階に整合するナラティブを安定的に生成することを確認

5. 議論はある?

- 相互作用中に GPT がより高度な発達段階へ移行する傾向を観察 - 言語交換が内部表現の精緻化に寄与する可能性を示唆 - 高い発達段階は協調効果を概ね向上させる一方、初期段階は複雑な文脈で結果がばらつく - 言語と embodied 課題を組み合わせた際の internal speech 評価の重要性を強調

6. 次に読むべき論文は?

- PerspAct system [1] の原論文 - Selman's theory [2] に関する文献 - ReAct (Reason and Act) パラダイムの原論文 - extended director task を用いた関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sabrina Patania, Luca Annese, Anna Lambiase, Anita Pellegrini, Tom Foulsham, Azzurra Ruggeri, Silvia Rossi, Silvia Serino, Dimitri Ognibene

分類: cs.CL, cs.AI, cs.HC, cs.RO

原文アブストラクト

Language and embodied perspective taking are essential for human collaboration, yet few computational models address both simultaneously. This work investigates the PerspAct system [1], which integrates the ReAct (Reason and Act) paradigm with Large Language Models (LLMs) to simulate developmental stages of perspective taking, grounded in Selman's theory [2]. Using an extended director task, we evaluate GPT's ability to generate internal narratives aligned with specified developmental stages, and assess how these influence collaborative performance both qualitatively (action selection) and quantitatively (task efficiency). Results show that GPT reliably produces developmentally-consistent narratives before task execution but often shifts towards more advanced stages during interaction, suggesting that language exchanges help refine internal representations. Higher developmental stages generally enhance collaborative effectiveness, while earlier stages yield more variable outcomes in complex contexts. These findings highlight the potential of integrating embodied perspective taking and language in LLMs to better model developmental dynamics and stress the importance of evaluating internal speech during combined linguistic and embodied tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI