日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2511.22963

自由形式の言語でヒューマノイドを操作する:統一動作語彙を持つ大規模言語行動モデル

Commanding Humanoid by Free-form Language: A Large Language Action Model with Unified Motion Vocabulary

シェア:XThreadsFacebookLINEはてブBluesky

自然言語コマンドをヒューマノイドの全身動作に直接変換する大規模言語行動モデルHumanoid-LLAを提案し、人間とヒューマノイドの動作語彙を統合して物理的安定性を確保した。

詳しい要約

1. どんなもの?

- どんなもの? - ヒト型ロボット(humanoid robot)に対し、自由形式の自然言語コマンドを直接全身運動へ変換する Large Language Action model「Humanoid-LLA」 - 制約のない自然言語を実行可能な whole-body motion に変換することを目指す - 言語と humanoid 運動のペアデータ不足、および物理的安定性という2つの課題に対処 - simulation と real-world の cross-embodiment 実験で評価

2. 先行研究と比べてどこがすごい?

- 先行研究と比べてどこがすごい? - 既存手法は単純な指示に限定される、または物理的妥当性のために運動の多様性を犠牲にする傾向があった - Humanoid-LLA は unconstrained natural language を直接 whole-body motion へ変換 - 新規言語コマンドへの汎化と多様な運動生成を、高い physical fidelity を保ちながら両立 - 具体的な先行研究名や定量比較は要旨からは不明

3. 技術・手法の肝は?

- 技術や手法の肝はどこ? - 高レベル言語意味論と物理的に grounded な制御を結ぶため、unified human-humanoid motion vocabulary を学習 - 2段階 fine-tuning framework を導入 - 第1段階: supervised motion Chain-of-Thought learning - 第2段階: physical feedback で洗練する reinforcement learning により robustness と stability を確保 - 言語-運動ペアデータの不足と物理的不安定性の両方に対処する設計

4. どうやって有効だと検証した?

- どうやって有効だと検証した? - simulation および real-world の cross-embodiment 実験で評価 - 新規言語コマンドへの汎化性能と多様な運動生成を検証 - 高い physical fidelity の維持を確認 - 具体的なデータセット名・評価指標・被験者数などは要旨からは不明

5. 議論はある?

- 議論はある? - 要旨からは不明 - 想定される論点として、real-world での安定性の限界、cross-embodiment の範囲、言語コマンドの複雑さへの対応度などが考えられるが、要旨には明記なし

6. 次に読むべき論文は?

- 次に読むべき論文は? - 要旨で参照・比較されている個別研究は明示されていない - 関連手法として、humanoid の language-conditioned motion generation、motion Chain-of-Thought、reinforcement learning with physical feedback、cross-embodiment learning の代表的文献を挙げる - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhirui Liu, Kaiyang Ji, Ke Yang, Yahao Fan, Jingyi Yu, Ye Shi, Jingya Wang

分類: cs.RO, cs.AI

原文アブストラクト

Enabling humanoid robots to follow free-form natural language commands is a critical step toward seamless human-robot interaction and general-purpose embodied AI. However, existing methods remain limited, often constrained to simple instructions or forced to sacrifice motion diversity for physical plausibility. To address this gap, we present Humanoid-LLA, a Large Language Action model that translates unconstrained natural language directly into executable whole-body motions for humanoid robots. Our approach tackles two core challenges: paired language-humanoid motion data scarcity and physical instability. First, we bridge high-level language semantics with physically-grounded control by learning a unified human-humanoid motion vocabulary. Second, we introduce a novel two-stage fine-tuning framework that begins with supervised motion Chain-of-Thought learning, followed by reinforcement learning refined with physical feedback to ensure robustness and stability. Extensive evaluation in simulation and real-world cross-embodiment experiments demonstrates that Humanoid-LLA achieves superior generalization to novel language commands and diverse motion generation while maintaining high physical fidelity.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI