日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2508.19476

マルチモーダル力覚センシングと模倣学習による密集クラッタからの優しい物体引き抜き

Gentle Object Retraction in Dense Clutter Using Multimodal Force Sensing and Imitation Learning

シェア:XThreadsFacebookLINEはてブBluesky

密集した物体群からロボットが物体を安全に引き抜くため、視覚・固有感覚・触覚・関節トルク・吸着監視を統合した模倣学習を提案し、力覚情報の有効性を検証した。

詳しい要約

1. どんなもの?

- 密集した可動物体群(家庭の棚・倉庫の棚など)からロボットが物体を安全に引き抜く(retraction)タスクを扱う研究。 - 視覚・固有感覚に加え、非把持型の触覚センシングや関節トルク由来の接触wrench、吸盤の真空ライン監視など複数の力覚情報を組み合わせる。 - imitation learning により、ランダム生成シーンでのデモンストレーションから policy を学習する。

2. 先行研究と比べてどこがすごい?

- 人間が視覚と手の甲・腕の非把持触覚を併用して clutter から物体を引き抜く点に着目。 - 接触力覚センシングを training にどう活かすかを、複数モダリティの ablation で体系的に調べている点が特徴。 - 力覚情報なしの baseline に対し、最良構成で 80% の性能改善を報告。 - 具体的な先行研究名との比較は要旨からは不明。

3. 技術・手法の肝は?

- 利用モダリティは (1) eye-in-hand vision、(2) proprioception、(3) non-prehensile triaxial tactile sensing、(4) 関節トルクから推定する contact wrenches、(5) suction cup の vacuum line 監視による object acquisition 指標。 - ランダム生成シーンでのデモンストレーションから imitation learning で policy を学習。 - wrench 情報と tactile 情報の有無を変える ablation study を実施。

4. どうやって有効だと検証した?

- 40 個の未見環境構成(unseen environment configurations)で各 policy を評価。 - 力覚センシングを用いた policy はいずれも過剰力による失敗が減少し、全体成功率が向上、完了時間も短縮。 - tactile と wrench の両方を用いた構成が最良で、力覚情報なし baseline 比 80% 改善。

5. 議論はある?

- 力覚情報の種類ごとの寄与を ablation で議論し、tactile と wrench の併用が最も有効と結論。 - 過剰力失敗の低減と成功率・速度の両面での利点を報告。 - 限界や失敗事例の詳細、一般化の範囲については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法として imitation learning(behavior cloning 系)、non-prehensile tactile sensing、contact wrench estimation、suction cup を用いた grasping の文献を次に読む候補として挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Dane Brouwer, Joshua Citron, Heather Nolte, Jeannette Bohg, Mark Cutkosky

分類: cs.RO

原文アブストラクト

Dense collections of movable objects are common in everyday spaces-from cabinets in a home to shelves in a warehouse. Safely retracting objects from such collections is difficult for robots, yet people do it frequently, leveraging learned experience in tandem with vision and non-prehensile tactile sensing on the sides and backs of their hands and arms. We investigate the role of contact force sensing for training robots to gently reach into constrained clutter and extract objects. The available sensing modalities are (1) "eye-in-hand" vision, (2) proprioception, (3) non-prehensile triaxial tactile sensing, (4) contact wrenches estimated from joint torques, and (5) a measure of object acquisition obtained by monitoring the vacuum line of a suction cup. We use imitation learning to train policies from a set of demonstrations on randomly generated scenes, then conduct an ablation study of wrench and tactile information. We evaluate each policy's performance across 40 unseen environment configurations. Policies employing any force sensing show fewer excessive force failures, an increased overall success rate, and faster completion times. The best performance is achieved using both tactile and wrench information, producing an 80% improvement above the baseline without force information.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI