日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2508.00491

模倣学習によるHannes義手の把持制御

HannesImitation: Grasping with the Hannes Prosthetic Hand via Imitation Learning

シェア:XThreadsFacebookLINEはてブBluesky

模倣学習を用いてHannes義手を制御し、非構造環境での物体把持を実現する手法とデータセットを提案した論文。

詳しい要約

1. どんなもの?

- Hannes 義手を対象とした imitation learning ベースの制御手法 - 名称: HannesImitationPolicy - 目的: 非構造環境での物体 grasping を実現 - 併せて新規データセット HannesImitationDataset を提案 - table, shelf, human-to-prosthesis handover の grasping デモを含む - 単一の diffusion policy を学習し、義手に展開 - 予測対象: wrist orientation と hand closure - 実験で多様な物体・条件での grasp 成功と、segmentation ベースの visual servo controller に対する優位性を示す

2. 先行研究と比べてどこがすごい?

- 義手制御では camera 等の sensory input による autonomy 向上が進むが、imitation learning の適用は未開拓 - 本研究はこのギャップを埋め、義手制御に imitation learning を導入 - 手動で annotated された sequence に依存せず、demonstration から学習 - 非構造環境での grasping を対象とし、単一の diffusion policy で wrist orientation と hand closure を予測 - segmentation ベースの visual servo controller を非構造シナリオで上回る点を主張

3. 技術・手法の肝は?

- imitation learning による grasping 制御 - 入力: カメラ等の sensory input(詳細は要旨からは不明) - 出力: wrist orientation と hand closure の予測 - 単一の diffusion policy を学習し、Hannes prosthetic hand に deploy - データ収集: HannesImitationDataset を構築 - table, shelf, human-to-prosthesis handover の grasping demonstration - 詳細な network 構成・入力 modality・action space の仕様は要旨からは不明

4. どうやって有効だと検証した?

- HannesImitationDataset のデータで diffusion policy を学習し、義手に deploy して評価 - 多様な物体・条件で grasp 成功を実験的に確認 - 非構造シナリオにおいて segmentation ベースの visual servo controller と比較し、優位性を提示 - 具体的な成功率・被験者数・試行数などの定量詳細は要旨からは不明

5. 議論はある?

- 義手制御への imitation learning 適用により dexterity restoration と非構造環境での運用拡大の可能性を示唆 - demonstration ベース学習により手動 annotation への依存を低減できる点を議論 - 一方、限界・失敗事例・安全性・ユーザ負荷・一般化範囲の詳細は要旨からは不明 - 実運用に向けた課題(被験者評価、長期運用、多様な環境適応など)は要旨からは不明

6. 次に読むべき論文は?

- 比較対象として本研究が上回りを主張する segmentation ベースの visual servo controller 関連研究 - diffusion policy の原論文(imitation learning における diffusion policy) - Hannes prosthetic hand の制御・autonomy に関する先行研究(camera 等 sensory input を用いるもの) - 義手における grasping/manipulation の imitation learning 応用に関する関連研究 - プロジェクトページ https://hsp-iit.github.io/HannesImitation で参照される関連資料

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Carlo Alessi, Federico Vasile, Federico Ceola, Giulia Pasquale, Nicolò Boccardo, Lorenzo Natale

分類: cs.RO, cs.AI

原文アブストラクト

Recent advancements in control of prosthetic hands have focused on increasing autonomy through the use of cameras and other sensory inputs. These systems aim to reduce the cognitive load on the user by automatically controlling certain degrees of freedom. In robotics, imitation learning has emerged as a promising approach for learning grasping and complex manipulation tasks while simplifying data collection. Its application to the control of prosthetic hands remains, however, largely unexplored. Bridging this gap could enhance dexterity restoration and enable prosthetic devices to operate in more unconstrained scenarios, where tasks are learned from demonstrations rather than relying on manually annotated sequences. To this end, we present HannesImitationPolicy, an imitation learning-based method to control the Hannes prosthetic hand, enabling object grasping in unstructured environments. Moreover, we introduce the HannesImitationDataset comprising grasping demonstrations in table, shelf, and human-to-prosthesis handover scenarios. We leverage such data to train a single diffusion policy and deploy it on the prosthetic hand to predict the wrist orientation and hand closure for grasping. Experimental evaluation demonstrates successful grasps across diverse objects and conditions. Finally, we show that the policy outperforms a segmentation-based visual servo controller in unstructured scenarios. Additional material is provided on our project page: https://hsp-iit.github.io/HannesImitation

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI