日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2602.05895

残差強化学習による大規模クレーンと受動関節ツールを用いた廃棄物容器吊り上げ

Residual Reinforcement Learning for Waste-Container Lifting Using Large-Scale Cranes with Underactuated Tools

シェア:XThreadsFacebookLINEはてブBluesky

油圧ローダークレーンで廃棄物容器を吊り上げる際、従来の制御に残差強化学習を組み合わせ、軌道追従精度と揺れ抑制を改善した。

詳しい要約

1. どんなもの?

- 都市環境での廃棄物容器リサイクルタスクのうち、容器吊り上げフェーズを対象。 - 油圧ローダークレーンに underactuated discharge unit を搭載。 - 公称 Cartesian controller と学習された residual policy を組み合わせた residual reinforcement learning (RRL) を提案。 - シミュレーションで実験。

2. 先行研究と比べてどこがすごい?

- 公称コントローラのみと比較して、追従精度向上、振動低減、吊り上げ成功率向上を実証。 - end-to-end 学習をゼロから行う必要がなく、精度とロバスト性を改善。 - 先行研究との具体的比較は要旨からは不明。

3. 技術・手法の肝は?

- 公称コントローラ:admittance control による軌道追従と pendulum-aware swing damping。 - その後、damped least-squares inverse kinematics と nullspace posture term で関節速度指令を生成。 - PPO で訓練した residual policy を Isaac Lab で適用し、未モデル化動特性やパラメータ変動を補償。 - randomized episode initialization と domain randomization(payload properties, actuator gains, passive joint parameters)で汎化を強化。

4. どうやって有効だと検証した?

- シミュレーション実験を実施。 - 公称コントローラ単独と比較し、追従精度、振動抑制、吊り上げ成功率の改善を確認。 - 具体的な評価指標や統計的検証の詳細は要旨からは不明。

5. 議論はある?

- シミュレーション結果は良好だが、実機への転移や現実環境での検証については要旨からは不明。 - 限界や課題についての議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として residual reinforcement learning (RRL)、PPO、Isaac Lab、admittance control、damped least-squares inverse kinematics が挙げられる。 - 同分野の定番として、クレーン制御における swing suppression や underactuated ロボットの制御に関する論文が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Qi Li, Karsten Berns

分類: cs.RO

原文アブストラクト

This paper studies the container lifting phase of a waste-container recycling task in urban environments, performed by a hydraulic loader crane equipped with an underactuated discharge unit, and proposes a residual reinforcement learning (RRL) approach that combines a nominal Cartesian controller with a learned residual policy. All experiments are conducted in simulation, where the task is characterized by tight geometric tolerances between the discharge-unit hooks and the container rings relative to the overall crane scale, making precise trajectory tracking and swing suppression essential. The nominal controller uses admittance control for trajectory tracking and pendulum-aware swing damping, followed by damped least-squares inverse kinematics with a nullspace posture term to generate joint velocity commands. A PPO-trained residual policy in Isaac Lab compensates for unmodeled dynamics and parameter variations, improving precision and robustness without requiring end-to-end learning from scratch. We further employ randomized episode initialization and domain randomization over payload properties, actuator gains, and passive joint parameters to enhance generalization. Simulation results demonstrate improved tracking accuracy, reduced oscillations, and higher lifting success rates compared to the nominal controller alone.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI