日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

両腕操作arXiv:2603.06538

両腕ロボット操作のための時間的タスク構造と動作タイミングの統合学習

Unified Learning of Temporal Task Structure and Action Timing for Bimanual Robot Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

人間のデモから記号的・非記号的な時間的制約を学習し、両腕操作の実行可能な時間パラメータ付きプランを生成する手法を提案した。

詳しい要約

1. どんなもの?

- 両手ロボットマニピュレーションのための時間的タスク構造と行動タイミングの統合学習手法。 - 人間のデモンストレーションからシンボリックおよびサブシンボリックな時間的制約を学習し、実行可能な時間パラメータ付きプランを導出する。 - 貢献は (i) 2行動間のタイミングの3次元表現と多変量ガウス混合モデル (Gaussian Mixture Models) に基づくサブシンボリックな時間関係表現、(ii) Davis-Putnam-Logemann-Loveland (DPLL) アルゴリズムに基づく矛盾のない Allen 関係の割り当ての発見とランキング、(iii) シンボリックとサブシンボリックな時間的制約を組み合わせた最適化ベースの計画システム。

2. 先行研究と比べてどこがすごい?

- 既存手法はシンボリックな時間関係と具体的なタイミングパラメータを別々に扱い、高レベルタスク計画と低レベル運動同期の間にギャップがあった。 - 本研究は両レベルを統合的に学習し、実行可能な時間パラメータ付きプランを生成する点が新しい。 - 人間のデモンストレーションに最も特徴的なベースラインよりも近い時間パラメータ付きプランを生成できることを示した。

3. 技術・手法の肝は?

- 2行動間のタイミングを3次元表現で表し、多変量ガウス混合モデル (Gaussian Mixture Models) を用いてサブシンボリックな時間関係を学習。 - Davis-Putnam-Logemann-Loveland (DPLL) アルゴリズムに基づき、矛盾のない Allen 関係の割り当てを発見・ランキングし、タスクの異なるモードを表現。 - シンボリックとサブシンボリックな時間的制約を組み合わせた最適化ベースの計画システムにより、時間パラメータ付きプランを導出。

4. どうやって有効だと検証した?

- 複数のデータセットで評価を実施。 - 提案手法が人間のデモンストレーションに最も特徴的なデモンストレーションベースラインよりも近い時間パラメータ付きプランを生成することを示した。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- Allen relations, Davis-Putnam-Logemann-Loveland (DPLL) algorithm, Gaussian Mixture Models, および時間的タスク計画に関する関連研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Christian Dreher, Patrick Dormanns, Andre Meixner, Tamim Asfour

分類: cs.RO

原文アブストラクト

Temporal task structure is fundamental for bimanual manipulation: a robot must not only know that one action precedes or overlaps another, but also when each action should occur and how long it should take. While symbolic temporal relations enable high-level reasoning about task structure and alternative execution sequences, concrete timing parameters are equally essential for coordinating two hands at the execution level. Existing approaches address these two levels in isolation, leaving a gap between high-level task planning and low-level movement synchronization. This work presents an approach for learning both symbolic and subsymbolic temporal task constraints from human demonstrations and deriving executable, temporally parametrized plans for bimanual manipulation. Our contributions are (i) a 3-dimensional representation of timings between two actions with methods based on multivariate Gaussian Mixture Models to represent temporal relationships between actions on a subsymbolic level, (ii) a method based on the Davis-Putnam-Logemann-Loveland (DPLL) algorithm that finds and ranks all contradiction-free assignments of Allen relations to action pairs, representing different modes of a task, and (iii) an optimization-based planning system that combines the identified symbolic and subsymbolic temporal task constraints to derive temporally parametrized plans for robot execution. We evaluate our approach on several datasets, demonstrating that our method generates temporally parametrized plans closer to human demonstrations than the most characteristic demonstration baseline.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI