Hsiao-Yu Fish Tung
収録論文 3本 ・ フィジカルAI/ロボット学習
sim2real言語接地VLA
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- 視点不変な物体分解型3D環境シミュレータsim2real2020/11/1
RGB-D動画から物体ごとに分解された3D特徴空間を学習し、物体間の相互作用によるシーン変化を予測するダイナミクスモデルを提案。任意視点で描画可能で、実機へのsim2real転移も示した。
- 3D視覚特徴表現による身体性を伴う言語接地言語接地2019/10/1
発話をシーンの3D視覚特徴マップに対応付ける手法を提案し、2Dベースの手法より物体参照や発話の妥当性判断、配置方策の報酬生成で大きく上回る性能を示した。
- 実演のナレーションから報酬を学習するVLA2018/4/1
教師が実演しながら自然言語で説明したデータから、言語表現と視覚的報酬検出器を対応付け、指示可能な行動方策を学習する手法を提案。
