日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2606.26093

ForceBand: sEMGを用いた力強い操作の学習

ForceBand: Learning Forceful Manipulation with sEMG

シェア:XThreadsFacebookLINEはてブBluesky

筋電位センサを搭載したリストバンドで人間の指先の力を推定し、力情報を含むデモンストレーションを生成してロボットの力制御を学習する手法を提案した。

詳しい要約

1. どんなもの?

本論文は、人間の筋活動を力情報付きのデモンストレーションに変換する低コストの手首装着型 sEMG システム「ForceBand」を提案する。 - 10時間のマルチモーダルデータセットを収集 - egocentric video, sEMG, IMU, fingertip force を含む - 多様な動作と物体をカバー - このデータセットで EMG2Force モデルを事前学習 - sEMG と IMU から指ごとの力を予測 - 短いユーザー固有のキャリブレーション後、ForceBand とビデオのみで目標タスクのデモを収集可能 - EMG2Force がデモに指ごとの力軌跡をラベル付けし、力拡張デモを生成 - ロボットポリシー学習に利用

2. 先行研究と比べてどこがすごい?

従来の人間デモデータ源(motion-capture trajectories や internet videos)は主に運動と外観を捉え、力に敏感な操作に不可欠な接触力を欠いていた。 - ForceBand は低コストの手首装着型 sEMG で筋活動を力情報に変換 - 視覚ベースのベースラインと比較して、力予測誤差を 50% 以上低減 - 形状・サイズ・重さが多様な物体に対する pick, squeeze, place タスクで 87% の成功率を達成 - 物体固有の力制御を必要とするタスクを実現

3. 技術・手法の肝は?

技術の肝は以下の通り。 - 低コストの手首装着型 sEMG システム「ForceBand」 - 10時間のマルチモーダルデータセット(egocentric video, sEMG, IMU, fingertip force)を収集 - このデータセットで EMG2Force モデルを事前学習 - sEMG と IMU 信号から指ごとの力を予測 - 短いユーザー固有のキャリブレーションを実施 - キャリブレーション後、ForceBand とビデオのみで目標タスクのデモを収集 - EMG2Force がデモに指ごとの力軌跡をラベル付けし、力拡張デモを生成 - 生成されたデモをロボットポリシー学習に使用

4. どうやって有効だと検証した?

実験による検証を実施。 - ForceBand が細かい指先相互作用を回復することを確認 - 視覚ベースのベースラインと比較して、力予測誤差が 50% 以上低い - 形状・サイズ・重さが多様な物体に対する pick, squeeze, place タスクで 87% の成功率を達成 - 物体固有の力制御が必要なタスクで有効性を実証

5. 議論はある?

要旨からは不明。 - 限界や議論の詳細は記述されていない - 今後の課題や一般化可能性についての言及もない

6. 次に読むべき論文は?

要旨で参照/比較されている研究や関連手法は明示されていない。 - 同分野の定番として、motion-capture trajectories や internet videos を用いた人間デモからのロボット学習、視覚ベースの力予測、sEMG を用いた筋活動解析、ロボットポリシー学習(imitation learning, reinforcement learning)などが挙げられる。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Botao He, Zhi Wang, Linna Kuang, Ishaan Ghosh, Jitendra Malik, Cornelia Fermuller, Tingfan Wu, Jiayuan Mao, Ruoshi Liu, Haozhi Qi, Yiannis Aloimonos

分類: cs.RO

原文アブストラクト

Human demonstrations are a scalable data source for learning robot manipulation policies. However, common sources of human demonstration data, such as motion-capture trajectories and internet videos, capture mostly motion and appearance while missing the contact forces that are critical for force-sensitive manipulation. In this paper, we introduce ForceBand, a low-cost wrist-worn sEMG system that turns human muscle activity into force-enriched demonstrations. We first collect a 10-hour multimodal dataset containing egocentric video, sEMG, IMU, and fingertip force measurements across diverse actions and objects. Using this dataset, we pre-train an EMG2Force model that predicts per-finger forces from sEMG and IMU signals. After a short user-specific calibration, users can collect target-task demonstrations using only ForceBand and video; EMG2Force then labels these demonstrations with per-finger force traces, producing force-augmented demonstrations for robot policy learning. Experiments show that ForceBand recovers fine-grained fingertip interactions with over 50% lower force prediction error than vision-based baselines and achieves an 87% success rate on pick, squeeze, and place tasks that require object-specific force control across objects with diverse shapes, sizes, and weights. Project website: https://forceband-emg.github.io

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI