ビデオからソフト連続ロボットの視覚的に解釈可能な振動子ネットワークを学習
Learning Visually Interpretable Oscillator Networks for Soft Continuum Robots from Video
ビデオからソフト連続ロボットのダイナミクスを学習する際に、注意マップで潜在次元を可視化し、振動子ネットワークで力学的解釈を可能にする手法を提案。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Henrik Krauss, Johann Licher, Naoya Takeishi, Annika Raatz, Takehisa Yairi
分類: cs.RO, cs.CV, cs.LG
原文アブストラクト
Learning soft continuum robot (SCR) dynamics from video offers flexibility but existing methods lack interpretability or rely on prior assumptions. Model-based approaches require prior knowledge and manual design. We bridge this gap by introducing: (1) The Attention Broadcast Decoder (ABCD), a plug-and-play module for autoencoder-based latent dynamics learning that generates pixel-accurate attention maps localizing each latent dimension's contribution while filtering static backgrounds, enabling visual interpretability via spatially grounded latents and on-image overlays. (2) Visual Oscillator Networks (VONs), a 2D latent oscillator network coupled to ABCD attention maps for on-image visualization of learned masses, coupling stiffness, and forces, thereby enabling mechanical interpretability. We validate our approach on single- and double-segment SCRs, demonstrating that ABCD-based models significantly improve multi-step prediction accuracy with 5.8x error reduction for Koopman operators and 3.5x for oscillator networks on a two-segment robot. VONs autonomously discover a chain structure of oscillators. This fully data-driven approach yields compact, mechanically interpretable models with potential relevance for future control applications.
関連論文
- 流体興奮性ニューロンのためのエネルギーベースモデリングソフトロボティクス
- 剛体マニピュレータの動きで受動腱駆動ソフト延長部を駆動・制御する手法ソフトロボティクス
- 太陽光で自走するサブグラム級ソフトロボットソフトロボティクス
- データ駆動によるソフトヘリコイドロボットの精密制御ソフトロボティクス
- PneuGen:LLMエージェントによるソフト空気圧ロボットのタスク駆動型協調設計ソフトロボティクス
- 柔軟トランクロボットの動的形状制御ソフトロボティクス
