日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

行動生成arXiv:2506.00043

動作から行動へ:ヒューマノイド生成行動制御の階層的モデリング

From Motion to Behavior: Hierarchical Modeling of Humanoid Generative Behavior Control

シェア:XThreadsFacebookLINEはてブBluesky

LLMが生成する階層的行動計画と動作を整合させ、人間の多様な行動を生成する統合フレームワークGBCを提案し、階層的計画付きデータセットGBC-100Kを構築した。

詳しい要約

1. どんなもの?

- 人間の日常行動を階層的な目標志向の運動として捉え、motion generation から behavior modeling へ拡張する研究 - 高レベル意図に駆動される多様な human motion を生成する統一フレームワーク Generative Behavior Control (GBC) を提案 - LLM が生成する階層的 behavior plan と motion を align させる枠組み - 既存 benchmark の不足を補う GBC-100K dataset を提案(semantic plan と motion plan を階層的に注釈)

2. 先行研究と比べてどこがすごい?

- 既存研究は低レベル・短時間の motion か高レベル action planning のいずれかに偏り、人間活動の階層的・目標志向性を扱えていなかった - GBC は LLM の階層的 behavior plan と motion を align し、意図駆動の運動生成を統合 - 既存手法と比べ 10 倍長い horizon で、より多様かつ目的志向の高品質 motion を生成 - 既存 benchmark に欠けていた behavioral plan を備えた GBC-100K を提供

3. 技術・手法の肝は?

- 着想は robotics の task planning と motion planning の協調制御を LLM でガイドする点 - LLM が高レベル意図から階層的 behavior plan(semantic plan / motion plan)を生成 - 生成された plan に motion を align させて運動を制御 - GBC-100K は目標に駆動された semantic plan と motion plan を階層的粒度で注釈

4. どうやって有効だと検証した?

- GBC-100K で学習した GBC の実験を実施 - 既存手法と比較し、10 倍長い horizon での生成を評価 - 多様性・目的性・高品質さの観点で優位性を示す結果を報告 - 具体的な評価指標・ベースラインの詳細は要旨からは不明

5. 議論はある?

- 人間行動の階層的・目標志向モデリングの基盤を築く位置づけを主張 - 既存 benchmark の behavioral plan 欠如という限界を GBC-100K で補う - 具体的な限界・失敗事例・倫理的議論は要旨からは不明 - dataset と source code は公開予定と記載

6. 次に読むべき論文は?

- 要旨で直接参照・比較された個別研究は明示されていない - 関連として human motion generation / synthesis の既存研究、LLM を用いた motion planning、robotics の task and motion planning (TAMP)、cognitive science 由来の behavior modeling を挙げる - 提案 dataset GBC-100K を用いる後続の behavioral modeling 研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jusheng Zhang, Jinzhou Tang, Sidi Liu, Mingyan Li, Sheng Zhang, Jian Wang, Keze Wang

分類: cs.RO, cs.CV

原文アブストラクト

Human motion generative modeling or synthesis aims to characterize complicated human motions of daily activities in diverse real-world environments. However, current research predominantly focuses on either low-level, short-period motions or high-level action planning, without taking into account the hierarchical goal-oriented nature of human activities. In this work, we take a step forward from human motion generation to human behavior modeling, which is inspired by cognitive science. We present a unified framework, dubbed Generative Behavior Control (GBC), to model diverse human motions driven by various high-level intentions by aligning motions with hierarchical behavior plans generated by large language models (LLMs). Our insight is that human motions can be jointly controlled by task and motion planning in robotics, but guided by LLMs to achieve improved motion diversity and physical fidelity. Meanwhile, to overcome the limitations of existing benchmarks, i.e., lack of behavioral plans, we propose GBC-100K dataset annotated with a hierarchical granularity of semantic and motion plans driven by target goals. Our experiments demonstrate that GBC can generate more diverse and purposeful high-quality human motions with 10* longer horizons compared with existing methods when trained on GBC-100K, laying a foundation for future research on behavioral modeling of human motions. Our dataset and source code will be made publicly available.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI