日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2609.38857

自己遮蔽を伴う密集環境下でのロバストな物体回収のための計画条件付き模倣学習

Plan-Conditioned Imitation for Robust Object Retrieval under Self-Occlusion in Dense Clutter

シェア:XThreadsFacebookLINEはてブBluesky

密集した clutter から物体を取り出す際、アームが物体を隠してしまう問題に対し、単一の非遮蔽観測からデジタルツインを初期化し、計画条件付き模倣学習で遮蔽下でも回収できる TRACE を提案。シミュレーションで90.7%、実機UR5eで90%の成功率を達成し、実行時間も大幅短縮。

詳しい要約

1. どんなもの?

- 密な clutter から物体を回収するタスクを対象とした TRACE という plan-conditioned imitation framework。 - 単一の非遮蔽観測から digital twin を初期化し、privileged teacher が固定の nominal rollout を生成。 - recurrent student が局所 rollout 文脈・部分物体観測・proprioception を統合し、予測からのずれを補正する行動を選択。 - 実行中 rollout は固定で、展開時に online teacher query や追加 simulator rollout を必要としない。

2. 先行研究と比べてどこがすごい?

- nominal replay の 43.4% に対し TRACE は 90.7% 成功。 - privileged closed-loop teacher の 96.7% に迫る性能を、teacher への online query なしで達成。 - 同ラベル予算 26,373 で student-state supervision 87.8% 対 expert-only cloning 66.7% を示し、単なるラベル追加以上の利得。 - UR5e で closed-loop teacher の 95.0% に対し 90.0% を保ちつつ、実行時間を 192.7 s から 67.3 s に短縮。

3. 技術・手法の肝は?

- 単一の unoccluded 観測で digital twin を初期化。 - privileged teacher が固定 nominal rollout を生成。 - recurrent student が local rollout context、partial object observations、proprioception を入力に行動選択。 - behavior cloning で初期化し、DAgger で student-visited states に teacher label を付けて精緻化。 - rollout は実行中固定のため、pushing 中に online teacher query や追加 simulator rollout が不要。

4. どうやって有効だと検証した?

- 511 の simulation test scenes で評価。 - TRACE 90.7%、nominal replay 43.4%、privileged closed-loop teacher 96.7%。 - 26,373-label budget で student-state supervision 87.8% 対 expert-only cloning 66.7%。 - UR5e 実機で TRACE 90.0%、closed-loop teacher 95.0%、実行時間 192.7 s から 67.3 s に短縮。 - pushing 中の teacher の 16.8 回/trial の sensing-related arm retractions を回避し、graspability evaluation 用の最終 withdrawal は保持。

5. 議論はある?

- 要旨からは不明。 - 明示されているのは self-occlusion 下の retrieval における arm retraction 回避と実行時間短縮の利点。 - 限界や失敗要因、一般化性、実機での詳細な議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている nominal replay、privileged closed-loop teacher、behavior cloning、DAgger、digital twin に関する研究。 - 関連手法として imitation learning、DAgger、behavior cloning、privileged learning、digital twin ベースの manipulation。 - 同分野の定番として object retrieval under clutter、self-occlusion を扱う manipulation 研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kowndinya Boyalakuntla, Ajinkya Pawar, Abdeslam Boularias, Jingjin Yu

分類: cs.RO

原文アブストラクト

Retrieving objects from dense clutter requires rearrangement during which the manipulator can occlude objects while moving them. Repeated arm withdrawals to restore visibility interrupt execution. We introduce TRACE, a plan-conditioned imitation framework for retrieval under self-occlusion. A single unoccluded observation initializes a digital twin, where a privileged teacher generates a fixed nominal rollout. A recurrent student combines local rollout context, partial object observations, and proprioception to select actions that can correct deviations from the prediction. Behavior cloning initializes the student; DAgger refines it with teacher labels on student-visited states. The rollout remains fixed throughout execution, so the deployed student needs neither online teacher queries nor additional simulator rollouts during pushing. On 511 simulation test scenes, TRACE achieves 90.7% success versus 43.4% for nominal replay and 96.7% for the privileged closed-loop teacher. At a matched 26,373-label budget, student-state supervision achieves 87.8% versus 66.7% for expert-only cloning, demonstrating gains beyond additional labels. On a UR5e, TRACE achieves 90.0% success versus 95.0% for the closed-loop teacher, while reducing total execution time from 192.7 s to 67.3 s. It avoids the teacher's 16.8 sensing-related arm retractions per trial during pushing, retaining a final withdrawal for graspability evaluation. Code and data will be released at: https://trace-retrieval.github.io.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI