日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ヒューマノイド制御arXiv:2610.38027

ヒューマノイド向けプロンプト可能な全身実行レイヤーMETATRON

METATRON: A Promptable Whole-Body Execution Layer for Humanoids

シェア:XThreadsFacebookLINEはてブBluesky

生成ベースポリシーとプログラマブルなスキル層を組み合わせ、コードでタスク意図をプロンプトとして与えるだけで、追加学習なしに歩行・復帰・物体把持・着座など多様な全身動作を実現する。

詳しい要約

1. どんなもの?

- ヒューマノイド向けの**promptable whole-body execution layer**「Metatron」 - 生成的な**base policy**と、プログラム可能な**skill layer**の二層構成 - base policyは**prompt**(timed body-part targets、velocity commands、style cuesの組み合わせ)を受け取り、多様な全身運動を生成 - 学習後はpolicyを**frozen**にし、**skills**(stateful programs)が各制御ステップでpromptとして意図を表現 - 実機**Unitree G1**で単一checkpointが歩行・回復・遠隔操作による物体把持・家具への着座を担う

2. 先行研究と比べてどこがすごい?

- 従来のhumanoid controllerはbalanceやwhole-body coordinationの共通性があるにもかかわらず**task-specific training**を要することが多い - Metatronは学習済みpolicyを凍結したまま、**code**としてskillを記述・改良できる点が異なる - **coding agents**がmotion dataを解析しcompact rulesをfitすることで、タスク毎のpolicy trainingなしにskillを精緻化 - 比較評価では、テストした**reference-tracking pipelines**よりreaching successとpush robustnessが高いと報告 - 同一recipeでsimulated characterのclimbingやacrobaticsも生成

3. 技術・手法の肝は?

- **generative base policy**がpartial goals(**prompt**)から全身運動を生成 - promptはtimed body-part targets、velocity commands、style cuesを組み合わせ可能 - 学習データは**motion capture**、**synthetic recovery trajectories**、**retargeted scene-interaction motions**を統合 - 学習後はpolicyを**frozen**し、**skills**が各制御ステップでpromptを出力 - skillsは通常の**code**で、**coding agents**がmotion dataを分析してcompact rulesをfitし改良 - 幾何的なrough sketchesをpolicyがcoordinated movementへ変換する枠組み

4. どうやって有効だと検証した?

- 実機**Unitree G1**上で、単一のfrozen checkpointがwalking、recovery、teleoperated object pickup、家具への着座を実行できることを確認 - **comparative evaluations**で、テストしたreference-tracking pipelinesよりreaching successとpush robustnessが高いと報告 - 同一recipeをsimulated characterに適用し、climbingとacrobaticsが生成されることを確認 - 詳細な被験者数や定量指標は要旨からは不明

5. 議論はある?

- 学習済みmotor capabilityを**code**経由で新skillへ変換できる点を主張 - 凍結policyとskill layerの分離により、タスク毎のpolicy trainingを回避 - ただし実機評価はUnitree G1上の限られたタスク群であり、汎化範囲は要旨からは不明 - coding agentsによるrule fittingの失敗時挙動や安全性、sim-to-realの詳細は要旨からは不明 - 比較対象のreference-tracking pipelinesの具体構成も要旨からは不明

6. 次に読むべき論文は?

- 要旨で比較対象として言及される**reference-tracking pipelines**(具体的名称は要旨からは不明) - 関連手法として**motion capture**を用いるhumanoid whole-body control研究 - **retargeting**を用いたscene-interaction motion学習 - **Unitree G1**を用いたhumanoid locomotion/whole-body controlの実機研究 - **coding agents**によるロボットskill生成・program synthesis関連研究 - 同分野の定番として**reinforcement learning**ベースのhumanoid controller(例: teacher-student型やmotion imitation型)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Chen Tessler, Yifeng Jiang, Alec Otto, Yi Shi, Umar Iqbal, Gal Chechik, Xue Bin Peng

分類: cs.RO, cs.AI

原文アブストラクト

Humanoid controllers often require task-specific training despite sharing the need for balance and whole-body coordination. We present Metatron, a promptable whole-body execution layer combining a generative base policy with a programmable skill layer. The base policy receives partial goals, collectively called a prompt, that can combine timed body-part targets, velocity commands, and style cues. It produces diverse whole-body motions consistent with these goals. Training combines motion capture, synthetic recovery trajectories, and retargeted scene-interaction motions. After training, the policy is frozen. Stateful programs called skills express task intent as prompts at each control step, drawing rough geometric sketches that the policy turns into coordinated movement. Skills are ordinary code, refined by coding agents that analyze motion data and fit compact rules without task-specific policy training. On the physical Unitree G1, one frozen checkpoint supports walking, recovery, teleoperated object pickup, and sitting on furniture. Comparative evaluations show higher reaching success and push robustness than the tested reference-tracking pipelines. The same recipe produces climbing and acrobatics on a simulated character. Metatron enables coding agents to turn learned motor capabilities into new skills through code, without further policy training.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI