Juan Carlos Niebles
Salesforce AI Research
収録論文 9本 ・ フィジカルAI/ロボット学習
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- 対話型ビジュアルジム:シミュレートされたユーザーとの閉ループ評価フレームワーク視覚対話/ベンチマーク2026/11/5
実行可能なタスク環境とペルソナ付きユーザーシミュレータを組み合わせ、調理・家事・モバイル操作の3領域で視覚対話モデルを閉ループ評価するベンチマークIVG-Benchを提案した。
- EgoMo3R: 一人称視点の身体動作と周囲環境の同時再構築一人称視点・3D再構築2026/11/1
一人称動画から、頭部の激しい動きやブレがあっても、人の3D動作と周囲のシーン形状を同時に復元する最適化フレームワークを提案。
- 動作画像拡散との共同学習によるロボットVLAの性能向上VLA2025/12/1
VLAモデルに将来の動きを予測する動作ヘッドを追加し、動作ヘッドと共同学習することで、推論速度を保ちながら動作推論能力と実環境性能を大幅に向上させた。
- IKEAマニュアルの実践:インターネット動画における組立指示の4Dグラウンディング4Dグラウンディング2024/11/1
家具の3Dモデル・組立説明書・インターネット動画を密に対応付けたデータセットを構築し、組立計画生成や動画内の部品位置推定など5つのタスクの評価基盤を提供した。
- ノイズを含む教師信号で歩行者の身体運動を分解し予測する歩行予測2019/11/1
一人称視点映像から歩行者の将来の全身キーポイント位置を予測するため、姿勢補完と軌道・姿勢への分解モジュールでノイズの多い注釈を活用する階層的予測ネットワークを提案した。
- 動作推論による目標ベース模倣学習模倣学習2019/11/1
第三者視点の動画から記号的な目標を推定するため、タスク・動作計画を組み合わせて実演者の真の意図を曖昧性除去する動作推論フレームワークを提案し、実キッチンで再現可能なことを示した。
- 記号プランナの連続緩和によるワンショット模倣学習模倣学習2019/8/1
ワンショット模倣学習を記号計画と記号接地の問題として定式化し、記号接地モデルの確率的出力上で直接計画する連続緩和プランナを提案した論文。
- ニューラルタスクグラフ:単一動画デモから未見タスクへ汎化する方策学習模倣学習2018/7/1
単一の動画デモから未見タスクを遂行する方策を生成するため、タスクの合成構造を中間表現として組み込むNeural Task Graphを提案し、ブロック積み上げや物体収集タスクで汎化性能を示した。
- 深層学習による行動ベースの屋内自律ナビゲーションナビゲーション2018/3/1
屋内ナビゲーションを意味的なグラフ表現で表し、視覚入力から直接モータ制御を生成する深層学習行動で経路誘導する手法を提案し、多数の仮想環境で有効性を示した。
