日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2512.08548

言語ベースの行動表現でロボット制御のスケール不一致を橋渡し

Bridging Scale Discrepancies in Robotic Control via Language-Based Action Representations

シェア:XThreadsFacebookLINEはてブBluesky

ロボットの行動コマンドを方向性に基づく言語表現に変換することで、異なる機体やタスク間の数値スケールの違いを吸収し、事前学習済み知識の転移性能を高める手法を提案した。

詳しい要約

1. どんなもの?

ロボット操作のend-to-end学習において、action commandの数値スケール差に起因するdistribution shiftを緩和するため、意味的に接地した言語表現(semantically grounded linguistic representation)でactionを正規化するpretraining手法を提案する研究。

2. 先行研究と比べてどこがすごい?

- 従来のdiscretized action representationは数値スケールに敏感で、platformやtask間のdistribution shiftに弱い - 提案手法は数値スケール効果を無視しdirectionalityを重視するmotion representationを用いる点が異なる - これによりpretrained knowledgeの転送が改善され、generalizationとtransferabilityが向上

3. 技術・手法の肝は?

- actionをdirectionality中心のmotion representationへ変換し、数値スケールの影響を排除 - 意味的に接地したlinguistic representationとしてactionを正規化しpretrainingに利用 - このabstractionでdistribution shiftを緩和 - action tokenとstandard vocabulary token間のfeature distanceを縮小しmodality gapを軽減

4. どうやって有効だと検証した?

- 2つのbenchmark上でmulti-task実験を実施 - 提案手法がrobotic manipulation taskにおけるgeneralization performanceとtransferabilityを有意に改善することを示した - 具体的なbenchmark名や比較手法は要旨からは不明

5. 議論はある?

- 数値スケールを捨てdirectionalityのみを保持するabstractionの限界や、スケール情報が本質的なタスクへの影響は要旨からは不明 - modality gap軽減の定量的分析や、他platformへの汎化範囲も要旨からは不明

6. 次に読むべき論文は?

- discretized action representationを用いる先行robotic manipulation研究 - large language model inspiredなend-to-end manipulation architecture - action tokenとvocabulary tokenのmodality gapを扱う関連研究(具体名は要旨からは不明)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuchi Zhang, Churui Sun, Shiqi Liang, Diyuan Liu, Chao Ji, Wei-Nan Zhang, Ting Liu

分類: cs.RO, cs.AI

原文アブストラクト

Recent end-to-end robotic manipulation research increasingly adopts architectures inspired by large language models to enable robust manipulation. However, a critical challenge arises from severe distribution shifts between robotic action data, primarily due to substantial numerical variations in action commands across diverse robotic platforms and tasks, hindering the effective transfer of pretrained knowledge. To address this limitation, we propose a semantically grounded linguistic representation to normalize actions for efficient pretraining. Unlike conventional discretized action representations that are sensitive to numerical scales, the motion representation specifically disregards numeric scale effects, emphasizing directionality instead. This abstraction mitigates distribution shifts, yielding a more generalizable pretraining representation. Moreover, using the motion representation narrows the feature distance between action tokens and standard vocabulary tokens, mitigating modality gaps. Multi-task experiments on two benchmarks demonstrate that the proposed method significantly improves generalization performance and transferability in robotic manipulation tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI