日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2606.06761

AxisGuide: RGB観測におけるロボット動作座標系の接地による堅牢な視覚運動操作の実現

AxisGuide: Grounding Robot Action Coordinate System in RGB Observations for Robust Visuomotor Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

ロボットの動作座標系を画像空間で可視化する補助チャネルをRGB観測に追加し、分布シフト下での操作性能と汎化性を向上させる軽量手法を提案した。

詳しい要約

1. どんなもの?

- 大規模behavior cloningで学習したvisuomotor manipulation policyの課題に対処する軽量なguidance手法。 - カメラパラメータとend-effector poseを用い、robot base-frameの軸を各カメラ視野に描画。 - RGB観測にcue channelを追加し、+x, +y, +z動作の画像空間での意味を明示。 - LIBERO simulationと実環境で評価。

2. 先行研究と比べてどこがすごい?

- 従来のbehavior cloningは意味的理解に優れるが、分布シフト下で低レベル動作が不安定。 - 同一配置・視点・照明でも物体位置が未見だと性能低下。 - 原因をaction understanding不足、特に画像空間でのbase-frame action coordinate system解釈不能と指摘。 - AxisGuideは意味理解とaction-coordinate解釈を橋渡しし、性能と汎化を改善。

3. 技術・手法の肝は?

- camera parametersとend-effector posesを利用。 - robot base-frame axesを各camera viewにrender。 - RGB observationsに少数のcue channelsをaugment。 - +x, +y, +z motionsの画像空間での意味を明示的に可視化。 - 軽量なguidance methodとして設計。

4. どうやって有効だと検証した?

- LIBERO simulationとreal-world environmentsでextensive evaluationsを実施。 - 結果としてsubstantial performance gainsとimproved generalizationを確認。 - 明示的なaction-coordinate cuesが信頼性と転移性の高いgeneralist visuomotor policiesの学習に有効と示す。

5. 議論はある?

- 性能低下の原因をaction understanding不足、特にaction coordinate systemの画像空間解釈不能と主張。 - 明示的action-coordinate cuesの有効性を強調。 - 具体的な限界や失敗事例、計算コストなどの議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法としてbehavior cloning、visuomotor manipulation、LIBERO simulationを挙げる。 - 同分野の定番としてlarge-scale behavior cloningやgeneralist visuomotor policiesが考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jiyun Jang, Yujin Sung, Woosung Joung, Daewon Chae, Sangwon Lee, Sohwi Kim, Jinkyu Kim, Jungbeom Lee

分類: cs.RO, cs.AI

原文アブストラクト

Visuomotor manipulation policies trained via large-scale behavior cloning have achieved strong semantic scene understanding, yet often fail to reliably execute correct low-level actions under distribution shifts. For example, even in a simple pickup task with identical scene layouts, camera viewpoints, and illumination, performance can degrade substantially when the object is placed at unseen locations. We argue that this gap arises from insufficient action understanding, namely the inability to interpret the robot's base-frame action coordinate system in image space. To address this issue, we introduce AxisGuide, a lightweight guidance method that bridges semantic scene understanding and action-coordinate interpretation. Using camera parameters and end-effector poses, AxisGuide renders the robot base-frame axes in each camera view and augments RGB observations with a small set of cue channels that explicitly visualize the meaning of the +x, +y, and +z motions in image space. Extensive evaluations in both the LIBERO simulation and real-world environments demonstrate that AxisGuide yields substantial performance gains and improved generalization, highlighting the effectiveness of explicit action-coordinate cues for learning reliable and transferable generalist visuomotor policies.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI