LAGEA: 言語ガイドによるロボット操作のための身体性エージェント
LAGEA: Language Guided Embodied Agents for Robotic Manipulation
視覚言語モデルによる言語フィードバックを強化学習の報酬形成に組み込み、ロボット操作タスクの成功率と収束速度を改善するフレームワークを提案。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Abdul Monaf Chowdhury, Akm Moshiur Rahman Mazumder, Rabeya Akter, Safaeid Hossain Arib
分類: cs.RO
原文アブストラクト
Robotic manipulation benefits from foundation models that describe goals, but today's agents still lack a principled way to learn from their own mistakes. We ask whether natural language can serve as feedback, an error-reasoning signal that helps embodied agents diagnose what went wrong and correct course. We introduce LAGEA (Language Guided Embodied Agents), a framework that turns episodic, schema-constrained reflections from a vision language model (VLM) into temporally grounded guidance for reinforcement learning. LAGEA summarizes each attempt in concise language, localizes the decisive moments in the trajectory, aligns feedback with visual state in a shared representation, and converts goal progress and feedback agreement into bounded, step-wise shaping rewards whose influence is modulated by an adaptive, failure-aware coefficient. This design yields dense signals early when exploration needs direction and gracefully recedes as competence grows. On the Meta-World MT10 and Robotic Fetch embodied manipulation benchmark, LAGEA improves average success over the state-of-the-art (SOTA) methods by 9.0% on random goals, 5.3% on fixed goals, and 17% on fetch tasks, while converging faster. These results support our hypothesis: language, when structured and grounded in time, is an effective mechanism for teaching robots to self-reflect on mistakes and make better choices.
関連論文
- 速度予測と終点予測を統合したロボットマニピュレーションマニピュレーション
- Close&Safe:冗長マニピュレータのためのC空間境界迂回による最大限のタスク保持マニピュレーション
- 物理指向の未来価値行動モデルによる動的物体操作マニピュレーション
- LAGR: タスク指向把持のための言語認識把持再ランキングマニピュレーション
- TinyARM-X:オープンソースで構成可能なトルク制御デスクトップスケールロボットマニピュレータ群マニピュレーション
- 移動マニピュレータの荷物受け渡しのための階層型アドミタンス・インピーダンス制御マニピュレーション
