日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2604.19677

不確実性下での高精度接触操作のためのハイブリッド制御ポリシーの学習

Learning Hybrid-Control Policies for High-Precision In-Contact Manipulation Under Uncertainty

シェア:XThreadsFacebookLINEはてブBluesky

強化学習を用いて、位置制御と力制御を動的に切り替えるハイブリッド制御ポリシーを学習し、不確実性の高い環境下での繊細なコネクタ挿入などの接触操作を高精度で実現する手法を提案した。

詳しい要約

1. どんなもの?

- 高精度な接触を伴うマニピュレーションを不確実性下で実現するための強化学習ベースの制御ポリシー。 - 位置制御と力制御を各制御次元で動的に選択するhybrid position-force control policiesを学習。 - 学習効率を向上させるMode-Aware Training for Contact Handling (MATCH)を導入。 - 壊れやすいpeg-in-holeタスクを極端な位置推定不確実性下で検証。

2. 先行研究と比べてどこがすごい?

- 従来のpose-based policiesは力の明示的制御が限定的で、損傷を避けるために慎重に調整された低レベルコントローラに依存。 - MATCHはpose-control policiesと比較して、最大10%高い成功率、5倍少ないpeg破損を達成。 - データ効率はpose-control policiesと同等でありながら、より大きく複雑な行動空間で学習。 - sim-to-real実験1600回以上で、高ノイズ設定においてpose policiesの2倍の成功率(33% vs. 68%)。 - variable impedance policiesと比較して平均約30%少ない力を適用。

3. 技術・手法の肝は?

- hybrid position-force control policiesを学習し、各制御次元で力制御か位置制御かを動的に選択。 - Mode-Aware Training for Contact Handling (MATCH)を導入し、ポリシーの行動確率を調整してハイブリッド制御におけるモード選択行動を明示的に模倣。 - これにより学習効率を向上。

4. どうやって有効だと検証した?

- 壊れやすいpeg-in-holeタスクを極端な位置推定不確実性下で使用。 - 一般的な状態推定誤差の種類において、MATCHがpose-control policiesより最大10%高い成功率、5倍少ないpeg破損を達成。 - データ効率がpose-control policiesと同等であることを確認。 - 1600回以上のsim-to-real実験を実施し、高ノイズ設定で成功率33% vs. 68%、variable impedance policiesより平均約30%少ない力を適用。 - Franka FR3を使用した実験室条件下での検証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:pose-based policies、pose-control policies、variable impedance policies。 - 関連手法:hybrid position-force control、Mode-Aware Training for Contact Handling (MATCH)。 - 同分野の定番:reinforcement learning for manipulation、sim-to-real transfer。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hunter L. Brown, Geoffrey Hollinger, Stefan Lee

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Reinforcement learning-based control policies have been frequently demonstrated to be more effective than analytical techniques for many manipulation tasks. Commonly, these methods learn neural control policies that predict end-effector pose changes directly from observed state information. For tasks like inserting delicate connectors which induce force constraints, pose-based policies have limited explicit control over force and rely on carefully tuned low-level controllers to avoid executing damaging actions. In this work, we present hybrid position-force control policies that learn to dynamically select when to use force or position control in each control dimension. To improve learning efficiency of these policies, we introduce Mode-Aware Training for Contact Handling (MATCH) which adjusts policy action probabilities to explicitly mirror the mode selection behavior in hybrid control. We validate MATCH's learned policy effectiveness using fragile peg-in-hole tasks under extreme localization uncertainty. We find MATCH substantially outperforms pose-control policies -- solving these tasks with up to 10% higher success rates and 5x fewer peg breaks than pose-only policies under common types of state estimation error. MATCH also demonstrates data efficiency equal to pose-control policies, despite learning in a larger and more complex action space. In over 1600 sim-to-real experiments, we find MATCH succeeds twice as often as pose policies in high noise settings (33% vs.~68%) and applies ~30% less force on average compared to variable impedance policies on a Franka FR3 in laboratory conditions.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI