日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習/変形物体操作arXiv:2605.29407

位相条件付き模倣学習と自律的失敗回復による堅牢な変形物体操作

Phase-Conditioned Imitation Learning with Autonomous Failure Recovery for Robust Deformable Object Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

変形物体操作のための、位相条件付きで力覚を考慮したフレームワークを提案。閉ループ階層アーキテクチャにより、視覚的に類似した観測での状態エイリアシングを解消し、実行失敗からの自律回復を実現する。

詳しい要約

1. どんなもの?

本論文は、変形可能物体操作(deformable object manipulation)を堅牢化するための phase-conditioned かつ force-aware な枠組みを提案する。 - 対象は dual arms による T-shirt の hanging と removing。 - 閉ループ階層アーキテクチャを採用。 - FiLM-conditioned ACT encoder、multi-modal phase predictor、hybrid impedance controller、haptic teleoperation interface から構成。 - 実行失敗からの自律的 recovery を可能にする。

2. 先行研究と比べてどこがすごい?

標準的な imitation learning 方策である Action Chunking with Transformers (ACT) と比較して優位性を示す。 - ACT は推論時に Markovian assumption に依存し、視覚的に類似した観測で矛盾する行動が必要な場合に state aliasing を起こす。 - そのため実行失敗からの自律的 recovery ができない。 - 提案手法は phase 条件付けと multi-modal な phase 推定により、この問題を解決する。 - 単一の統一方策で phase 固有の行動を生成しつつ、phase 間で action dynamics を共有できる。

3. 技術・手法の肝は?

技術の肝は以下の通り。 - FiLM-conditioned ACT encoder: 現在の task phase に基づいて feature extraction を変調。 - multi-modal phase predictor: visual, force, pose feedback を融合し、リアルタイムに phase を推定。 - 視覚だけでは見えない contact failures を検出し、自律的に recovery trajectories を起動。 - hybrid impedance controller: 柔軟な実行を実現。 - haptic teleoperation interface: force-aware なデータ収集を可能にする。

4. どうやって有効だと検証した?

以下の方法で有効性を検証。 - Ablation studies: FiLM-based modulation が unconditioned および token-level conditioned baselines より有意に優れることを示す。 - t-SNE analysis: FiLM が well-separated で phase-specific な feature representations を誘導することを確認。 - dual arms による T-shirt の hanging と removing で検証。 - 閉ループシステムにより hanging 成功率が 56% から 87% に向上(自律的 error recovery による)。

5. 議論はある?

要旨からは不明。 - 限界や失敗事例、計算コスト、一般化可能性についての議論は要旨に記載されていない。 - 提案手法の適用範囲や他の deformable object への拡張性も明記されていない。

6. 次に読むべき論文は?

要旨で参照・比較されている研究や関連手法を挙げる。 - Action Chunking with Transformers (ACT) - FiLM (Feature-wise Linear Modulation) - hybrid impedance controller - haptic teleoperation - 同分野の定番として imitation learning や deformable object manipulation に関する研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Dayuan Chen, Kai Tang, Yukuan Zhang, Kazuhiro Kosuge, Yasuhisa Hirata

分類: cs.RO

原文アブストラクト

This paper presents a phase-conditioned, force-aware framework for robust deformable object manipulation. Standard imitation learning policies such as Action Chunking with Transformers (ACT) rely on a Markovian assumption at inference, causing state aliasing when visually similar observations require contradictory actions and preventing autonomous recovery from execution failures. We address this with a closed-loop hierarchical architecture. A FiLM-conditioned ACT encoder modulates feature extraction based on the current task phase, enabling a single unified policy to produce phase-specific behaviors while sharing action dynamics across phases. A multi-modal phase predictor fusing visual, force, and pose feedback estimates the phase in real time, detecting contact failures that are invisible to vision alone and autonomously triggering recovery trajectories. The system is completed by a hybrid impedance controller for compliant execution and a haptic teleoperation interface for force-aware data collection. Ablation studies show that FiLM-based modulation significantly outperforms both unconditioned and token-level conditioned baselines, and t-SNE analysis confirms that FiLM induces well-separated, phase-specific feature representations. Validated on hanging and removing a T-shirt with dual arms, the closed-loop system improves the hanging success rate from 56\% to 87\% through autonomous error recovery. Code and videos: https://leledeyuan00.github.io/phaser/

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI