AERMANI-PLACE: 空中マニピュレータによる言語誘導オブジェクト配置
AERMANI-PLACE: Language Guided Object Placement with Aerial Manipulators
空中マニピュレータを用いて、自然言語の指示から物体の配置位置を推定し、実際に配置するフレームワークを提案。画像編集モデルと深度情報を組み合わせて配置点を特定し、実機で高い成功率を達成した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Sarthak Mishra, Ritama Sanyal, Rishabh Dev Yadav, Wei Pan, Spandan Roy
分類: cs.RO
原文アブストラクト
Object placement is a fundamental component of aerial manipulation tasks, yet existing systems typically require the desired placement position to be specified explicitly in metric coordinates. Such interfaces are not intuitive and require users to reason about coordinate frames and scene geometry, making them difficult to use in practical deployments. In contrast, humans often communicate spatial goals through a combination of language and pointing gestures. Inspired by this observation, we present AERMANI-PLACE, a framework for language-guided object placement with aerial manipulators. Given a scene image and a natural language instruction, an image editing model generates a modified version of the scene containing a visual marker that indicates where the object should be placed. This marker is then grounded into the physical environment using depth observations to recover a metric place point, after which a placement trajectory is generated and executed by the aerial manipulator. We evaluate the proposed approach on a test set of 100 language-guided placement tasks and demonstrate successful execution on a real aerial manipulation platform. Experimental results show that the proposed method reliably infers placement locations from language instructions with an average success rate of 87\% on the test-set and transfers effectively to real-world aerial manipulation with an average success rate of 72\%. Video: https://youtu.be/SgwwgLBsv0g
関連論文
- CAPTURER:多様な環境で動的かつ精密な把持を実現する器用な空中マニピュレータ空中マニピュレーション
- 空中マニピュレータの非線形制御空中マニピュレーション
- LLM支援による能動的タスク生成を用いた適応型空中移動マニピュレーションポリシー学習空中マニピュレーション
- 異種環境を横断する対話型空中移動のベンチマーク空中マニピュレーション
- コード飛行:能動的な視覚・物理フィードバックによる空中マニピュレーションのための身体性コーディングエージェント空中マニピュレーション
- HexaGripper: 単一アクチュエータ・ウインチ展開型グリッパによる自律空中荷物回収空中マニピュレーション
