TMR-VLA：三脚シリコーン製ソフトロボットの磁気運動制御のための視覚-言語-行動モデル
TMR-VLA:Vision-Language-Action Model for Magnetic Motion Control of Tri-leg Silicone-based Soft Robot
磁気駆動の三脚ソフトロボットの動作を、言語指示と視覚情報から直接電圧制御するエンドツーエンドのマルチモーダルシステムを提案した。
詳しい要約
1. どんなもの？
2. 先行研究と比べてどこがすごい？
3. 技術・手法の肝は？
4. どうやって有効だと検証した？
5. 議論はある？
6. 次に読むべき論文は？
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Ruijie Tang, Chi Kit Ng, Kaixuan Wu, Long Bai, Guankun Wang, Yiming Huang, Yupeng Wang, Hongliang Ren
分類: cs.RO, cs.AI, cs.SY, eess.SY
原文アブストラクト
In-vivo environments, magnetically actuated soft robots offer advantages such as wireless operation and precise control, showing promising potential for painless detection and therapeutic procedures. We developed a trileg magnetically driven soft robot (TMR) whose multi-legged design enables more flexible gaits and diverse motion patterns. For the silicone made of reconfigurable soft robots, its navigation ability can be separated into sequential motions, namely squatting, rotation, lifting a leg, walking and so on. Its motion and behavior depend on its bending shapes. To bridge motion type description and specific low-level voltage control, we introduced TMR-VLA, an end-to-end multi-modal system for a trileg magnetic soft robot capable of performing hybrid motion types, which is promising for developing a navigation ability by adapting its shape to language-constrained motion types. The TMR-VLA deploys embodied endoluminal localization ability from EndoVLA, and fuses sequential frames and natural language commands as input. Low-level voltage output is generated based on the current observation state and specific motion type description. The result shows the TMR-VLA can predict how the voltage applied to TMR will change the dynamics of a silicon-made soft robot. The TMR-VLA reached a 74% average success rate.
関連論文
- 流体興奮性ニューロンのためのエネルギーベースモデリングソフトロボティクス
- 剛体マニピュレータの動きで受動腱駆動ソフト延長部を駆動・制御する手法ソフトロボティクス
- 太陽光で自走するサブグラム級ソフトロボットソフトロボティクス
- データ駆動によるソフトヘリコイドロボットの精密制御ソフトロボティクス
- PneuGen：LLMエージェントによるソフト空気圧ロボットのタスク駆動型協調設計ソフトロボティクス
- 柔軟トランクロボットの動的形状制御ソフトロボティクス
