日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

把持/力センシングarXiv:2605.00307

コンプライアントロボットグリッパのためのモデルベース視覚接触位置推定と力センシングシステム

A Model-based Visual Contact Localization and Force Sensing System for Compliant Robotic Grippers

シェア:XThreadsFacebookLINEはてブBluesky

変形するフィンレイ型ソフトグリッパのRGB-D画像から構造的特徴点を抽出し、逆有限要素解析を用いて把持力を推定するモデルベースの視覚力センシング手法を提案した。

詳しい要約

1. どんなもの?

- ソフトグリッパの把持力を間接的に推定するシステム。 - RGB-Dリストカメラ画像から変形を捉え、モデルベースで接触位置と力を推定。 - fin-ray形状のソフトグリッパを対象。 - 反復的接触位置推定と未知物体への汎化を統合。

2. 先行研究と比べてどこがすごい?

- 従来のend-to-end深層学習は新シナリオへの汎化が脆い。 - 既存のモデルベース手法は把持や現代のグリッパ形状に不適。 - 本手法はモデルベースで汎化性を向上し、未知物体や視覚遮蔽に頑健。 - コスト・複雑さ・機械的堅牢性・性能のトレードオフを緩和。

3. 技術・手法の肝は?

- リストカメラのRGB-D画像からfin-ray形状ソフトグリッパの構造的キーポイントを抽出。 - キーポイントで逆有限要素解析シミュレーションのパラメータを定義。 - Simulation Open Framework Architecture (SOFA) を使用。 - 反復的接触位置推定サブシステムは深層学習ベースのオンライン3D再構成と姿勢推定パイプラインを利用し、接触位置を動的に更新。

4. どうやって有効だと検証した?

- 様々な物体・条件下で実験。 - 荷重相での平均RMSE 0.23 N、NRMSD 2.11%。 - 把持プロセス全体で平均RMSE 0.48 N、NRMSD 4.34%。 - リアルタイムモデルベース間接力センシングの可能性を示す。

5. 議論はある?

- 視覚遮蔽や未知物体への頑健性を主張。 - リアルタイム性の可能性に言及。 - 限界や失敗事例、計算コスト、一般化範囲の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法としてend-to-end深層学習、モデルベース手法、逆有限要素解析、SOFA、fin-ray gripper、RGB-Dリストカメラ、オンライン3D再構成、姿勢推定が挙げられる。 - 同分野の定番としてsoft robotic gripperの力センシング、visual force estimation、finite element analysis、Simulation Open Framework Architecture (SOFA) に関する論文を読むべき。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kaiwen Zuo, Shuyuan Yang, Zonghe Chua

分類: cs.RO, cs.CV

原文アブストラクト

Grasp force estimation can help prevent robots from damaging delicate objects during manipulation and improve learning-based robotic control. Integrating force sensing into deformable grippers negotiates trade-offs in cost, complexity, mechanical robustness, and performance. With the growing integration of RGB-D wrist cameras into robotic systems for control purposes, camera-based techniques are a promising solution for indirect visual force estimation. Current approaches mostly utilize end-to-end deep learning, which can be brittle when generalizing to new scenarios, while existing model-based approaches are unsuited to grasping and modern grasper geometries. To address these challenges, we developed a model-based visual force sensing approach integrating an iterative contact localization with generalization to unseen objects. The system extracts structural key points from wrist camera RGB-D images of deforming fin-ray-shaped soft grippers, and uses these key points to define parameters of an inverse finite element analysis simulation in Simulation Open Framework Architecture. The iterative contact localization sub-system utilizes a deep learning-based online 3D reconstruction and pose estimation pipeline to dynamically update contact location, and is robust to visual occlusion and unseen objects. Our system demonstrated an average root mean square error of 0.23 N and normalized root mean square deviation of 2.11% during the load phase, and 0.48 N and 4.34% over the entire grasping process when interacting with different objects under various conditions, showcasing its potential for real-time model-based indirect force sensing of soft grippers.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI