日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ヒューマンロボットインタラクションarXiv:2511.23300

SafeHumanoid: VLMとRAGによる人型ロボット上半身インピーダンス制御

SafeHumanoid: VLM-RAG-driven Control of Upper Body Impedance for Humanoid Robot

シェア:XThreadsFacebookLINEはてブBluesky

視覚言語モデルと検索拡張生成を組み合わせ、周囲の状況や人間との距離に応じて人型ロボットのインピーダンスと速度を調整する制御パイプラインを提案し、安全性の向上を実証した。

詳しい要約

1. どんなもの?

- 人間型ロボットの上半身インピーダンス制御を、egocentric vision と VLM・RAG で文脈適応的にスケジューリングするパイプライン「SafeHumanoid」 - 目的は HRI における安全性と信頼性の向上 - タスク完了だけでなく、場面文脈や人間との近接度に応じて impedance と速度を調整 - 対象は卓上マニピュレーション(wiping、object handovers、liquid pouring)

2. 先行研究と比べてどこがすごい?

- 要旨からは不明(先行研究との具体的比較は記述されていない) - 位置づけとして、impedance control に semantic grounding を与える点を新規性として主張 - VLM と RAG を組み合わせ、検証済みシナリオ DB に照合して制御パラメータを決める構成

3. 技術・手法の肝は?

- egocentric 視覚フレームを構造化 VLM prompt で処理 - 出力を embedding し、curated database(検証済みシナリオ群)とマッチング - マッチ結果を joint-level impedance command に変換 - inverse kinematics を介して指令化 - これにより stiffness・damping・速度プロファイルを文脈依存的にスケジュール

4. どうやって有効だと検証した?

- 卓上マニピュレーションで評価 - 人間の存在あり/なしの両条件 - タスクは wiping、object handovers、liquid pouring - 結果として stiffness・damping・速度プロファイルが文脈適応的に変化し、タスク成功率を維持しつつ安全性が向上

5. 議論はある?

- 現状の推論遅延は最大 1.4 s で、 highly dynamic な場面での応答性を制限 - それでも impedance control の semantic grounding が、より安全で標準準拠の humanoid collaboration への有効な道筋であると主張 - その他の限界や議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない - 関連手法として VLM、RAG、impedance control、inverse kinematics が挙げられる - 同分野の定番として human-robot interaction における safety-aware control や vision-language grounding 関連の研究を次に読む候補とする

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yara Mahmoud, Jeffrin Sam, Nguyen Khang, Marcelino Fernando, Issatay Tokmurziyev, Miguel Altamirano Cabrera, Muhammad Haris Khan, Artem Lykov, Dzmitry Tsetserukou

分類: cs.RO

原文アブストラクト

Safe and trustworthy Human Robot Interaction (HRI) requires robots not only to complete tasks but also to regulate impedance and speed according to scene context and human proximity. We present SafeHumanoid, an egocentric vision pipeline that links Vision Language Models (VLMs) with Retrieval-Augmented Generation (RAG) to schedule impedance and velocity parameters for a humanoid robot. Egocentric frames are processed by a structured VLM prompt, embedded and matched against a curated database of validated scenarios, and mapped to joint-level impedance commands via inverse kinematics. We evaluate the system on tabletop manipulation tasks with and without human presence, including wiping, object handovers, and liquid pouring. The results show that the pipeline adapts stiffness, damping, and speed profiles in a context-aware manner, maintaining task success while improving safety. Although current inference latency (up to 1.4 s) limits responsiveness in highly dynamic settings, SafeHumanoid demonstrates that semantic grounding of impedance control is a viable path toward safer, standard-compliant humanoid collaboration.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI