日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2601.07304

自律フォークリフトの長期的マルチゴールタスクのための異種マルチエキスパート強化学習

Heterogeneous Multi-Expert Reinforcement Learning for Long-Horizon Multi-Goal Tasks in Autonomous Forklifts

シェア:XThreadsFacebookLINEはてブBluesky

倉庫での自律フォークリフトの長期的タスクを、ナビゲーションとマニピュレーションの専門家に分け、模倣学習と強化学習を組み合わせて効率的に学習するフレームワークを提案。

詳しい要約

1. どんなもの?

- 自律フォークリフト向けの長期的・多目的タスクを解くための強化学習フレームワーク。 - 異種の専門家(Heterogeneous Multi-Expert)を組み合わせ、Semantic Task Plannerで制御する。 - 大規模ナビゲーションと高精度マニピュレーションを分離し、干渉を防ぐ。 - 実環境に近いGazeboシミュレーションで評価。

2. 先行研究と比べてどこがすごい?

- 従来のend-to-end学習はナビゲーションとマニピュレーションの相反する要求を同時に学習すると最適化干渉が生じる。 - 提案手法はタスクをサブポリシーに分解し、各専門家が干渉なく特定の行動空間に集中できる。 - 逐次実行とend-to-endベースラインと比較して、タスク成功率94.2%(ベースライン62.5%)、作業時間21.4%削減、配置誤差1.5cm以内を達成。

3. 技術・手法の肝は?

- HMERは長期的タスクをSemantic Task Plannerが制御する専門サブポリシーに分解。 - マクロレベルのナビゲーションとマイクロレベルのマニピュレーションを分離。 - プランナーが専門家の逐次実行を調整し、タスク計画と連続制御のギャップを埋める。 - スパース探索問題に対処するため、Hybrid Imitation-Reinforcement Training Strategyを導入。 - 専門家のデモンストレーションでポリシーを初期化し、強化学習で微調整。

4. どうやって有効だと検証した?

- Gazeboシミュレーションで実験を実施。 - 逐次ベースラインおよびend-to-endベースラインと比較。 - タスク成功率94.2%(ベースライン62.5%)、作業時間21.4%削減、配置誤差1.5cm以内を達成。 - 精密なマテリアルハンドリングに対する有効性を検証。

5. 議論はある?

- 要旨からは不明。 - 限界や失敗事例、実機への展開可能性、他のタスクへの汎化性などは記述されていない。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:end-to-end学習、逐次ベースライン。 - 関連手法:Hybrid Imitation-Reinforcement Training Strategy、Semantic Task Planner。 - 同分野の定番:Hierarchical Reinforcement Learning、Multi-Expert Learning、Imitation Learning。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yun Chen, Bowei Huang, Fan Guo, Kang Song

分類: cs.RO, cs.AI

原文アブストラクト

Autonomous mobile manipulation in unstructured warehouses requires a balance between efficient large-scale navigation and high-precision object interaction. Traditional end-to-end learning approaches often struggle to handle the conflicting demands of these distinct phases. Navigation relies on robust decision-making over large spaces, while manipulation needs high sensitivity to fine local details. Forcing a single network to learn these different objectives simultaneously often causes optimization interference, where improving one task degrades the other. To address these limitations, we propose a Heterogeneous Multi-Expert Reinforcement Learning (HMER) framework tailored for autonomous forklifts. HMER decomposes long-horizon tasks into specialized sub-policies controlled by a Semantic Task Planner. This structure separates macro-level navigation from micro-level manipulation, allowing each expert to focus on its specific action space without interference. The planner coordinates the sequential execution of these experts, bridging the gap between task planning and continuous control. Furthermore, to solve the problem of sparse exploration, we introduce a Hybrid Imitation-Reinforcement Training Strategy. This method uses expert demonstrations to initialize the policy and Reinforcement Learning for fine-tuning. Experiments in Gazebo simulations show that HMER significantly outperforms sequential and end-to-end baselines. Our method achieves a task success rate of 94.2\% (compared to 62.5\% for baselines), reduces operation time by 21.4\%, and maintains placement error within 1.5 cm, validating its efficacy for precise material handling.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI