日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2510.25405

応力誘導強化学習による変形・壊れやすい物体の穏やかなSim-to-Realマニピュレーション

Sim-to-Real Gentle Manipulation of Deformable and Fragile Objects with Stress-Guided Reinforcement Learning

シェア:XThreadsFacebookLINEはてブBluesky

応力をペナルティとする報酬とオフライン実演・カリキュラム学習を組み合わせ、豆腐のような壊れやすい物体をシミュレーションから実世界へゼロショットで穏やかに操作する手法を提案した。

詳しい要約

1. どんなもの?

- 変形・破損しやすい物体(deformable and fragile objects)をロボットで優しく操作するための視覚ベース強化学習(vision-based reinforcement learning)手法の提案。 - 物体に加わる応力(stress)を罰則化した reward(stress-penalized reward)を導入し、破損を明示的に抑制する。 - 豆腐の把持・押し操作を対象に、simulation で学習した policy を real world へ zero-shot transfer する。

2. 先行研究と比べてどこがすごい?

- 既存手法は正確な物体モデルや専用 sensor・gripper に依存し、複雑化・汎化性の欠如という課題があった。 - 本研究はそれらを使わず、vision-based RL と stress-penalized reward のみで damage-aware な操作を実現。 - 専用ハードや精密モデルを要さず汎化しやすい点が差分。

3. 技術・手法の肝は?

- stress-penalized reward により物体への損傷を明示的に回避する方策を学習。 - 学習の立ち上げ(bootstrap)のため offline demonstrations を活用。 - rigid proxies から deformables へ段階的に進む curriculum を設計。 - 観測は vision-based で、simulation 学習後に real world へ zero-shot transfer。

4. どうやって有効だと検証した?

- simulation と real-world の両方で評価。 - simulation で学習した policy を zero-shot で実機に転移し、tofu の把持・押し操作を実施。 - vanilla RL policies と比較し、fragile objects への印加 stress を 36.5% 低減しつつタスク目標を達成。 - 学習された policy が damage-aware で gentle な操作を示すことを確認。

5. 議論はある?

- 提案手法は damage-aware な gentle manipulation を示し、stress 低減とタスク達成を両立。 - ただし要旨からは、限界・失敗事例・汎化範囲・計算コストなどの詳細な議論は不明。 - 対象タスクは tofu の把持・押しに限定されており、他物体への一般性は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で直接参照・比較されているのは vanilla RL policies と offline demonstrations を用いる手法群。 - 関連して読むべき候補として、sim-to-real transfer、curriculum learning、deformable object manipulation、reward shaping に関する研究が考えられる(具体名は要旨からは不明)。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kei Ikemura, Yifei Dong, David Blanco-Mulero, Alberta Longhini, Li Chen, Florian T. Pokorny

分類: cs.RO

原文アブストラクト

Robotic manipulation of deformable and fragile objects presents significant challenges, as excessive stress can lead to irreversible damage to the object. While existing solutions rely on accurate object models or specialized sensors and grippers, this adds complexity and often lacks generalization. To address this problem, we present a vision-based reinforcement learning approach that incorporates a stress-penalized reward to discourage damage to the object explicitly. In addition, to bootstrap learning, we incorporate offline demonstrations as well as a designed curriculum progressing from rigid proxies to deformables. We evaluate the proposed method in both simulated and real-world scenarios, showing that the policy learned in simulation can be transferred to the real world in a zero-shot manner, performing tasks such as picking up and pushing tofu. Our results show that the learned policies exhibit a damage-aware, gentle manipulation behavior, demonstrating their effectiveness by decreasing the stress applied to fragile objects by 36.5% while achieving the task goals, compared to vanilla RL policies.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI