日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ヒューマンロボットインタラクションarXiv:2508.02106

没入型ヒューマン-Xインタラクションに向けて:物理的に妥当な動作合成のためのリアルタイムフレームワーク

Towards Immersive Human-X Interaction: A Real-Time Framework for Physically Plausible Motion Synthesis

シェア:XThreadsFacebookLINEはてブBluesky

人間とアバター・ヒューマノイド・ロボットの相互作用をリアルタイムに物理的に妥当に合成するフレームワークHuman-Xを提案。自己回帰的反応拡散プランナと強化学習による動作追従ポリシーを統合し、VR/ロボット協調に応用。

詳しい要約

1. どんなもの?

- 没入型 VR/AR と humanoid robotics 向けの、リアルタイムに物理的に妥当な human-X interaction を合成するフレームワーク「Human-X」 - human-avatar、human-humanoid、human-robot の相互作用を対象 - auto-regressive reaction diffusion planner で action と reaction を同時にリアルタイム予測 - reinforcement learning で訓練した actor-aware motion tracking policy を統合 - 目的は real-time responsiveness、physical feasibility、safety の緊張関係の解決

2. 先行研究と比べてどこがすごい?

- 既存手法は kinematic motion generation で進展するも、real-time responsiveness・physical feasibility・safety の緊張関係を扱えていない - 既存は post-hoc alignment や simplified physics に依存 - 本手法は action と reaction をリアルタイムに同時予測し、同期と context-aware response を実現 - actor-aware motion tracking policy により foot sliding や penetration などの artifact を動的に回避 - Inter-X と InterHuman で SOTA を上回る改善

3. 技術・手法の肝は?

- auto-regressive reaction diffusion planner で action と reaction を jointly かつリアルタイムに予測 - 相互作用相手の動きに応じた context-aware な応答を生成 - reinforcement learning で訓練した actor-aware motion tracking policy を統合 - 相手の動きに動的に適応し、foot sliding や penetration を回避 - 物理的リアリズムと安全性の向上を狙う構成

4. どうやって有効だと検証した?

- Inter-X と InterHuman データセットで実験 - motion quality、interaction continuity、physical plausibility について SOTA と比較し有意な改善を報告 - 実世界応用として human-robot interaction 向け VR interface でフレームワークを検証

5. 議論はある?

- 要旨からは不明 - 限界、失敗事例、計算コスト、real-time 性能の定量値などは述べられていない - 実世界 VR interface での検証に触れるが、詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- Inter-X - InterHuman - auto-regressive reaction diffusion planner 関連の diffusion-based motion generation 研究 - reinforcement learning による motion tracking policy 研究 - human-robot interaction 向け VR interface 関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kaiyang Ji, Ye Shi, Zichen Jin, Kangyi Chen, Lan Xu, Yuexin Ma, Jingyi Yu, Jingya Wang

分類: cs.CV, cs.RO

原文アブストラクト

Real-time synthesis of physically plausible human interactions remains a critical challenge for immersive VR/AR systems and humanoid robotics. While existing methods demonstrate progress in kinematic motion generation, they often fail to address the fundamental tension between real-time responsiveness, physical feasibility, and safety requirements in dynamic human-machine interactions. We introduce Human-X, a novel framework designed to enable immersive and physically plausible human interactions across diverse entities, including human-avatar, human-humanoid, and human-robot systems. Unlike existing approaches that focus on post-hoc alignment or simplified physics, our method jointly predicts actions and reactions in real-time using an auto-regressive reaction diffusion planner, ensuring seamless synchronization and context-aware responses. To enhance physical realism and safety, we integrate an actor-aware motion tracking policy trained with reinforcement learning, which dynamically adapts to interaction partners' movements while avoiding artifacts like foot sliding and penetration. Extensive experiments on the Inter-X and InterHuman datasets demonstrate significant improvements in motion quality, interaction continuity, and physical plausibility over state-of-the-art methods. Our framework is validated in real-world applications, including virtual reality interface for human-robot interaction, showcasing its potential for advancing human-robot collaboration.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI