日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習/操作arXiv:2607.26315

MoMo: 時空間アクションのトークン化によるロボット操作の動作モード制御

MoMo: Dial Motion Mode in Robot Manipulation with Spatiotemporal Action Tokenization

シェア:XThreadsFacebookLINEはてブBluesky

ロボット操作の実行スタイル(動作モード)をタスクから分離して学習し、指示に応じて動作の速さや滑らかさを変えられる2段階の模倣学習フレームワークMoMoを提案した。

詳しい要約

1. どんなもの?

MoMoは、ロボット操作における動作の実行レベルのバリエーション(motion mode)を学習可能な再利用可能な行動因子として捉え、タスクと連続的なmotion-mode条件を入力とする二段階の模倣学習フレームワークである。Spatiotemporal Action TokenizerとBehavior-Cloning Transformerから構成され、タスク実行時の動作の質(steady, dynamic, intermediate)を制御する。

2. 先行研究と比べてどこがすごい?

従来の模倣学習はタスクの成功に焦点を当て、実行レベルの多様性(速度、加速度、アプローチ角度など)を明示的に扱わなかった。MoMoは、このような実行レベルのバリエーションをタスク横断で共有可能な因子として学習し、タスクとモードの組み合わせに対するcompositional generalizationを実現する点が新しい。

3. 技術・手法の肝は?

手法の肝は、時空間アクショントークン化(spatiotemporal action tokenization)により動作を離散トークンに変換し、タスクと連続的なmotion-mode条件を入力とするTransformerベースのBehavior Cloningで、モード条件に応じた動作生成を可能にすること。これにより、モードをタスクから分離して学習し、未見のタスク・モード組み合わせに一般化する。

4. どうやって有効だと検証した?

6つの実ロボット操作タスクで検証。モード条件を変化させると、人間の評価者が区別できるsteady, dynamic, intermediateの動作が生成され、関節速度、加速度、エンドエフェクタのアプローチピッチに違いが見られた。単一モードでデモされたタスクに対して、未見の要求モードを転移しつつタスク成功率をほぼ維持した。

5. 議論はある?

要旨からは、モードの定義や連続性の解釈、タスク成功率とモード制御のトレードオフ、他のロボットや環境への一般化、モードの自動推定などに関する議論は不明。また、人間評価の主観性や、モード条件の範囲外での挙動についても言及がない。

6. 次に読むべき論文は?

要旨で参照されている研究は明示されていないが、関連手法としてBehavior Cloning、Action Tokenization、Compositional Generalization、Imitation Learningの分野の定番論文が挙げられる。具体的には、Behavior TransformersやACT (Action Chunking with Transformers) などが関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuhan Hu, Hugues Thomas, Peide Huang, Mouli Sivapurapu, Benoit Landry, Arto Kivila

分類: cs.RO

原文アブストラクト

To operate effectively across diverse contexts, robots must not only perform manipulation tasks accurately but also adapt how their actions unfold to the task, object, and interaction setting. We ask whether this execution-level variation can be learned as a reusable behavioral factor shared across tasks. We present \textbf{MoMo}, a two-stage imitation-learning framework consisting of a spatiotemporal action tokenizer and a behavior-cloning transformer that takes task and a continuous motion-mode condition as inputs. Across six real-robot manipulation tasks, varying this condition produces steady, dynamic, and intermediate behaviors that human raters can distinguish and that differ in joint speed, acceleration, and end-effector approach pitch. On tasks demonstrated in only one mode, MoMo transfers the unseen requested mode while largely preserving task success. Together, these results provide evidence of compositional generalization to unseen task--mode combinations and show that motion mode can be reused across tasks to control how a manipulation skill is performed.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI