日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2609.16040

Bi-MoDe: 双方向制御に基づく模倣学習における修飾子条件付きデコーディングによる実行速度と接触強度の調整

Bi-MoDe: Bilateral Control-based Imitation Learning via Modifier-Conditioned Decoding for Modulation of Execution Speed and Contact Intensity

シェア:XThreadsFacebookLINEはてブBluesky

Transformer行動デコーダの各層に制約付き潜在変数を注入し、実行速度や接触強度などの指示に従って模倣学習した動作を調整できるようにした。実機のホワイトボード拭きタスクで有効性を検証した。

詳しい要約

1. どんなもの?

本論文は、Bilateral control-based imitation learning において、推論時に作業の実行速度や接触強度を指示できる Bi-MoDe を提案する。 - 位置と力の情報を扱う bilateral control を基盤に、Transformer action decoder へ modifier を条件付けする。 - 時間的・物理的 modifier の組み合わせを実世界の whiteboard wiping task で評価する。 - 学習済みタスクを「ゆっくり/速く」「やさしく/強く」などと指定可能にする枠組み。

2. 先行研究と比べてどこがすごい?

既存の bilateral control-based imitation learning は位置と力を扱えるが、推論時に作業の実行の仕方(速度や接触強度)を操作者が指定する手段が限られていた。 - Bi-MoDe は modifier-conditioned decoding により、行動指令を action-chunk 生成へ直接注入できる。 - action-chunking baseline と比べ、物理的指令への追従性を改善しつつ、時間的制御は同等程度に維持する。

3. 技術・手法の肝は?

Bi-MoDe は modifier-conditioned decoding framework である。 - 制約付き潜在(constrained latent)を Transformer action decoder の各層へ adaLN-Zero により注入する。 - これにより behavioral directives が action-chunk generation に直接影響する。 - 時間的 modifier と物理的 modifier の組み合わせを扱う。

4. どうやって有効だと検証した?

実世界の whiteboard wiping task で、時間的・物理的 modifier の組み合わせを評価した。 - Bi-MoDe は action-chunking baseline より物理的指令追従を改善し、時間的制御は同等程度に維持した。 - ablation により、decoder conditioning と latent-space composition が相互作用し、その組み合わせが正確な物理的指令追従に重要であることを示した。

5. 議論はある?

ablation から、decoder conditioning と latent-space composition の組み合わせが物理的指令追従に重要であると議論している。 - 一方、時間的制御については baseline と同等程度であり、改善は限定的と示唆される。 - その他の限界や議論の詳細は要旨からは不明。

6. 次に読むべき論文は?

要旨で参照・比較されているのは action-chunking baseline である。 - 関連手法として bilateral control-based imitation learning、action chunking、Transformer action decoder、adaLN-Zero が挙げられる。 - 同分野の定番として imitation learning、behavior cloning、action chunking Transformer 系の研究が次に読む候補となる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Takumi Kobayashi, Masato Kobayashi, Yuki Uranishi

分類: cs.RO

原文アブストラクト

Bilateral control-based imitation learning captures both position and force information, making it well suited to contact-rich manipulation. However, existing approaches provide limited means for an operator to specify how a learned task should be executed at inference time, such as slowly or quickly, gently or firmly. We propose Bi-MoDe, a modifier-conditioned decoding framework that injects a constrained latent into every layer of the Transformer action decoder via adaLN-Zero, allowing behavioral directives to directly influence action-chunk generation. We evaluate the method on a real-world whiteboard wiping task with combinations of temporal and physical modifiers. Bi-MoDe improves physical directive following over the action-chunking baseline while maintaining comparable temporal control. An ablation further shows that decoder conditioning and latent-space composition interact, and that their combination is important for accurate physical directive following. Additional material is available at the https://mertcookimg.github.io/bi-mode/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI