Francis Ferraro
収録論文 4本 ・ フィジカルAI/ロボット学習
音声言語接地言語グラウンディング能動学習マルチモーダル学習
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- 音声から視覚に接地した言語を学ぶ:深層音響表現による新手法音声言語接地2021/12/1
視覚知覚と生の音声入力を用いて、接地言語獲得が可能であることを示した研究。自己教師あり音声表現を活用し、テキスト入力への依存を減らしつつ、特定集団への包摂性を高める。
- 視覚知覚に基づく言語獲得のためのニューラル変分学習言語グラウンディング2021/7/1
視覚カテゴリを事前定義せずに、生成モデルで言語と視覚の共有埋め込みを学習し、低リソース・多言語データでも物体の意味予測が可能なことを示した。
- サンプリング手法が重要:ロボット言語獲得のための能動学習能動学習2020/11/1
ロボットの言語獲得タスク3種に能動学習を適用し、データ選択手法が学習効率に与える影響を分析した研究。代表性と多様性を兼ね備えたサンプリングが重要であることを示した。
- 接地言語学習のためのマルチモーダルデータセットの提示と分析マルチモーダル学習2020/7/1
家庭内物体を音声・テキストで説明したマルチモーダルデータセットGoLDを構築し、モダリティの違いが言語学習に与える影響を分析した。
