日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2508.21272

合法行動マスク付きDQNと安全なZYZ再把持によるSoma Cube組立学習:Doosan M0609への応用

Learning to Assemble the Soma Cube with Legal-Action Masked DQN and Safe ZYZ Regrasp on a Doosan M0609

シェア:XThreadsFacebookLINEはてブBluesky

合法行動マスク付きDQNと特異点回避の再把持戦略を組み合わせ、6自由度協働ロボットでSoma Cubeを自律組立する手法を提案。階層型Q関数で計算量を削減し、カリキュラム学習で高成功率を達成した。

詳しい要約

1. どんなもの?

- 6-DOF 協働ロボット Doosan M0609 と underactuated gripper を用い、Soma cube の自律組立を強化学習で学習させる研究 - legal-action masked DQN と safe ZYZ regrasp 戦略を統合した初の包括的適用を主張 - 対象課題は combinatorial action space explosion、unsafe motion planning、assembly strategy learning の3点

2. 先行研究と比べてどこがすごい?

- legal-action masked DQN と singularity-safe motion planning を Doosan M0609 上で体系的に統合した初の試みと主張 - 階層型 Q-function 分解により計算量を O(3,132) から O(116)+O(27) へ削減しつつ solution completeness を維持 - 具体的な先行研究名・比較対象は要旨からは不明

3. 技術・手法の肝は?

- legal-action masked DQN により不正行動をマスクし action space の爆発を抑制 - Q-function 推定を orientation 成分と position 成分に分解する hierarchical architecture を採用 - safe ZYZ regrasp により特異点を避ける再把持を計画 - ground-first で vertically accessible な組立順序を促す robot-friendly reward function を設計 - 2-piece、3-piece、7-piece の3段階 curriculum learning を実施

4. どうやって有効だと検証した?

- 3段階 curriculum で訓練し、Level 1 は500 episodes 以内に100%成功、Level 2 は92.9%、Level 3 は39.9% - 総訓練 episodes は105,300 - 実機 Doosan M0609 上での検証と読めるが、詳細な評価プロトコルは要旨からは不明

5. 議論はある?

- Level 3(7-piece)の成功率39.9%は依然低く、難易度上昇に伴う性能低下が課題 - underactuated gripper や safe ZYZ regrasp の限界・失敗要因の議論は要旨からは不明 - 実環境のばらつきや sim-to-real の影響は要旨からは不明

6. 次に読むべき論文は?

- legal-action masking を用いた DQN 関連研究(action masking 系) - curriculum learning を用いた robotic assembly 研究 - ZYZ regrasp や singularity-safe motion planning の関連手法 - Soma cube 組立を含む robotic manipulation のベースライン研究(要旨に具体名の参照なし)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jaehong Oh, Seungjun Jung, Sawoong Kim

分類: cs.RO, stat.CO

原文アブストラクト

This paper presents the first comprehensive application of legal-action masked Deep Q-Networks with safe ZYZ regrasp strategies to an underactuated gripper-equipped 6-DOF collaborative robot for autonomous Soma cube assembly learning. Our approach represents the first systematic integration of constraint-aware reinforcement learning with singularity-safe motion planning on a Doosan M0609 collaborative robot. We address critical challenges in robotic manipulation: combinatorial action space explosion, unsafe motion planning, and systematic assembly strategy learning. Our system integrates a legal-action masked DQN with hierarchical architecture that decomposes Q-function estimation into orientation and position components, reducing computational complexity from $O(3,132)$ to $O(116) + O(27)$ while maintaining solution completeness. The robot-friendly reward function encourages ground-first, vertically accessible assembly sequences aligned with manipulation constraints. Curriculum learning across three progressive difficulty levels (2-piece, 3-piece, 7-piece) achieves remarkable training efficiency: 100\% success rate for Level 1 within 500 episodes, 92.9\% for Level 2, and 39.9\% for Level 3 over 105,300 total training episodes.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI