Gyan Tatiya
収録論文 5本 ・ フィジカルAI/ロボット学習
マルチモーダル知覚触覚音声視覚ナビゲーションマルチモーダル認識sim2real
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- MOSAIC: 対話的知覚によるロボット学習のための統合マルチセンサ物体特性表現の学習マルチモーダル知覚2023/9/1
視覚・触覚・聴覚の基盤モデルを蒸留・整合させ、ロボットが物体特性を統合的に理解する枠組みを提案。物体分類と物体把持タスクで有効性を示した。
- 道具と行動を超えた知覚的知識転移による物体認識触覚2023/3/1
複数の道具や行動で得た触覚・音響などの非視覚情報を共有潜在空間で学習し、未経験の道具や行動でも物体を認識できるフレームワークを提案した。
- 知識駆動型シーンプライアによる意味的音声視覚身体ナビゲーション音声視覚ナビゲーション2022/12/1
物体と領域の関係を表す知識グラフと二重グラフエンコーダネットワークを強化学習に組み込み、未知の室内シーンや未知の音源物体への汎化性能を向上させた音声視覚ナビゲーション手法を提案。
- 異種ロボット形態間での非視覚的物体特性の暗黙知の転移マルチモーダル認識2022/9/1
触覚や聴覚など非視覚モダリティで得た物体特性の暗黙知を、形態の異なるロボット間で転移する多段射影フレームワークを提案し、物体特性・同一性認識タスクで有効性を示した。
- ACuTE: 単純環境から複雑環境へのカリキュラム自動転送sim2real2022/4/1
単純な環境で最適化したカリキュラムの設計を複雑な実環境へ転送する枠組みを提案し、学習の立ち上がりと目標到達時間を改善、実機へのSim2Real転送も実証した。
