日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

両腕操作arXiv:2603.21679

BiPreManip: 予期的協調によるアフォーダンスに基づく両腕準備的操作の学習

BiPreManip: Learning Affordance-Based Bimanual Preparatory Manipulation through Anticipatory Collaboration

シェア:XThreadsFacebookLINEはてブBluesky

直接掴みにくい物体や機能的操作が難しい物体に対して、一方の腕が準備的操作を行い他方の腕の目標動作を可能にする両腕協調タスクを扱い、視覚アフォーダンスに基づくフレームワークを提案した。

詳しい要約

1. どんなもの?

- 両腕で協調して物体を操作するタスクの新しいクラス「Collaborative Preparatory Manipulation」を提案。 - 一方の腕が準備操作を行い、もう一方の腕が目的の操作を達成する。 - 例:平らなiPadをテーブルの端に押してから掴む、ペン本体を持ち上げてキャップを外すなど。 - 物体の意味と形状を理解し、空間関係を予測し、長期的な協調動作を計画する必要がある。

2. 先行研究と比べてどこがすごい?

- 従来の両腕操作研究と比べ、準備操作と目的操作の非対称な協調を扱う点が新しい。 - 物体の意味と形状を理解し、最終目標を先読みして準備操作を計画する能力が求められる。 - 視覚的アフォーダンスに基づく表現により、多様な物体カテゴリに一般化できる。 - シミュレーションと実世界で成功率と一般化性能が大幅に向上。

3. 技術・手法の肝は?

- 視覚的アフォーダンスに基づくフレームワークを提案。 - まず最終的な目的操作を想像し、その達成を支援する準備操作の系列を一方の腕に生成させる。 - アフォーダンス中心の表現により、腕間の予測的な推論と協調を可能にする。 - これにより、多様な物体にまたがる一般化を実現。

4. どうやって有効だと検証した?

- シミュレーションと実世界の両方で広範な実験を実施。 - 競合ベースラインと比較して、タスク成功率と一般化性能が大幅に向上することを示した。 - 具体的な評価指標や実験設定の詳細は要旨からは不明。

5. 議論はある?

- 要旨からは、手法の限界や議論の詳細は不明。 - 提案手法の有効性は示されているが、失敗ケースや計算コスト、実世界でのロバスト性に関する議論は明記されていない。

6. 次に読むべき論文は?

- 要旨で参照されている具体的な先行研究は不明。 - 関連手法として、bimanual manipulation、visual affordance learning、task and motion planning (TAMP)、anticipatory collaboration などが挙げられる。 - 同分野の定番として、OpenAI Gym の bimanual 環境や Robosuite などのシミュレータを用いた研究が参考になる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yan Shen, Feng Jiang, Zichen He, Xiaoqi Li, Yuchen Liu, Zhiyu Li, Ruihai Wu, Hao Dong

分類: cs.RO

原文アブストラクト

Many everyday objects are difficult to directly grasp (e.g., a flat iPad) or manipulate functionally (e.g., opening the cap of a pen lying on a desk). Such tasks require sequential, asymmetric coordination between two arms, where one arm performs preparatory manipulation that enables the other's goal-directed action - for instance, pushing the iPad to the table's edge before picking it up, or lifting the pen body to allow the other hand to remove its cap. In this work, we introduce Collaborative Preparatory Manipulation, a class of bimanual manipulation tasks that demand understanding object semantics and geometry, anticipating spatial relationships, and planning long-horizon coordinated actions between the two arms. To tackle this challenge, we propose a visual affordance-based framework that first envisions the final goal-directed action and then guides one arm to perform a sequence of preparatory manipulations that facilitate the other arm's subsequent operation. This affordance-centric representation enables anticipatory inter-arm reasoning and coordination, generalizing effectively across various objects spanning diverse categories. Extensive experiments in both simulation and the real world demonstrate that our approach substantially improves task success rates and generalization compared to competitive baselines.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI