日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

動作生成arXiv:2508.14561

残差ベクトル量子化によるポーズ表現の表現力と分離性の向上

Making Pose Representations More Expressive and Disentangled via Residual Vector Quantization

シェア:XThreadsFacebookLINEはてブBluesky

ポーズコードに残差ベクトル量子化で連続的な動きの特徴を加え、テキストからの人間動作生成の表現力と制御性を高めた研究。

詳しい要約

1. どんなもの?

- テキストからの3D人間モーション生成/テキストベースのモーション制御における、ポーズ表現の改良手法。 - ポーズコード表現に連続的なモーション特徴を追加し、表現力と操作性の両立を狙う。 - Residual Vector Quantization (RVQ) を用いて潜在表現を拡張する。 - HumanML3D データセットで評価。

2. 先行研究と比べてどこがすごい?

- 従来の Controllable motion generation (CoMo) はポーズコード表現に依存。 - 離散ポーズコード単体では細粒度のモーション詳細を捉えられず、表現力が制限される点が課題。 - 提案法はポーズコードの解釈性・操作可能性を保ちつつ、高周波詳細などの微妙な動きを捉えられるようにする。 - FID を 0.041 から 0.015 へ、Top-1 R-Precision を 0.508 から 0.510 へ改善。

3. 技術・手法の肝は?

- ポーズコードベースの潜在表現に、連続的なモーション特徴を Residual Vector Quantization (RVQ) で付加する設計。 - 離散ポーズコードの解釈性・操作可能性を維持。 - RVQ により高周波詳細などの細かなモーション特性を捕捉。 - 詳細なアーキテクチャや学習手順は要旨からは不明。

4. どうやって有効だと検証した?

- HumanML3D データセットで実験。 - 定量評価: FID が 0.041→0.015、Top-1 R-Precision が 0.508→0.510。 - 定性評価: ポーズコード間の pairwise direction similarity を分析し、モーション編集に対する操作性を確認。

5. 議論はある?

- ポーズコードの解釈性・操作可能性と細粒度表現の両立が主張されている。 - pairwise direction similarity により編集の操作性を示唆。 - 限界や失敗事例、計算コスト、他データセットへの汎化については要旨からは不明。

6. 次に読むべき論文は?

- Controllable motion generation (CoMo) の先行研究。 - Residual Vector Quantization (RVQ) を用いた表現学習の関連研究。 - HumanML3D を用いた text-to-motion の代表的手法。 - ポーズコード/離散潜在表現を用いたモーション生成・編集の研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sukhyun Jeong, Hong-Gi Shin, Yong-Hoon Choi

分類: cs.CV, cs.RO

原文アブストラクト

Recent progress in text-to-motion has advanced both 3D human motion generation and text-based motion control. Controllable motion generation (CoMo), which enables intuitive control, typically relies on pose code representations, but discrete pose codes alone cannot capture fine-grained motion details, limiting expressiveness. To overcome this, we propose a method that augments pose code-based latent representations with continuous motion features using residual vector quantization (RVQ). This design preserves the interpretability and manipulability of pose codes while effectively capturing subtle motion characteristics such as high-frequency details. Experiments on the HumanML3D dataset show that our model reduces Frechet inception distance (FID) from 0.041 to 0.015 and improves Top-1 R-Precision from 0.508 to 0.510. Qualitative analysis of pairwise direction similarity between pose codes further confirms the model's controllability for motion editing.

関連論文

  1. 1パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  2. 2川崎重工業のロボット外販を報道新製品・発表
  3. 3Boston Dynamics、GlobalFoundriesでAtlasを試験へ 半導体製造で2027年初頭から半導体・GPU
  4. 4丸文、RealManのロボットアームやヒューマノイドを国内販売提携・買収
  5. 5NVIDIA、SC26で科学研究向けAIエージェントとHPC基盤を発表新製品・発表

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI