AeroPlace-Flow: 視覚的先読みと物体フローによる空中マニピュレータの言語接地物体配置
AeroPlace-Flow: Language-Grounded Object Placement for Aerial Manipulators via Visual Foresight and Object Flow
空中マニピュレータが自然言語指示に従って物体を配置するための訓練不要フレームワークを提案し、画像編集による目標画像生成と3D幾何推論を統合して衝突回避軌道を生成、実機で平均75%の成功率を達成した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Sarthak Mishra, Rishabh Dev Yadav, Naveen Nair, Wei Pan, Spandan Roy
分類: cs.RO
原文アブストラクト
Precise object placement remains underexplored in aerial manipulation, where most systems rely on predefined target coordinates and focus primarily on grasping and control. Specifying exact placement poses, however, is cumbersome in real-world settings, where users naturally communicate goals through language. In this work, we present AeroPlace-Flow, a training-free framework for language-grounded aerial object placement that unifies visual foresight with explicit 3D geometric reasoning and object flow. Given RGB-D observations of the object and the placement scene, along with a natural language instruction, AeroPlace-Flow first synthesizes a task-complete goal image using image editing models. The imagined configuration is then grounded into metric 3D space through depth alignment and object-centric reasoning, enabling the inference of a collision-aware object flow that transports the grasped object to a language and contact-consistent placement configuration. The resulting motion is executed via standard trajectory tracking for an aerial manipulator. AeroPlace-Flow produces executable placement targets without requiring predefined poses or task-specific training. We validate our approach through extensive simulation and real-world experiments, demonstrating reliable language-conditioned placement across diverse aerial scenarios with an average success rate of 75% on hardware.
関連論文
- CAPTURER:多様な環境で動的かつ精密な把持を実現する器用な空中マニピュレータ空中マニピュレーション
- 空中マニピュレータの非線形制御空中マニピュレーション
- LLM支援による能動的タスク生成を用いた適応型空中移動マニピュレーションポリシー学習空中マニピュレーション
- 異種環境を横断する対話型空中移動のベンチマーク空中マニピュレーション
- コード飛行:能動的な視覚・物理フィードバックによる空中マニピュレーションのための身体性コーディングエージェント空中マニピュレーション
- HexaGripper: 単一アクチュエータ・ウインチ展開型グリッパによる自律空中荷物回収空中マニピュレーション
