Kevin Xie
収録論文 10本 ・ フィジカルAI/ロボット学習
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- NVIDIA OmniDreams: 閉ループ自動運転シミュレーションのためのリアルタイム生成ワールドモデル自動運転シミュレーション2026/6/1
自動運転の閉ループシミュレーション向けに、拡散モデルを基盤としたリアルタイム生成ワールドモデルOmniDreamsを提案し、運転行動に応じたセンサ映像を自己回帰的に生成することで、従来の再構成ベースのシミュレータでは困難な長尾シナリオを合成可能にした。
- DriveJudge: 視覚言語モデルによる自動運転評価の再考自動運転評価2026/6/1
自動運転の評価を、ルールベースの物理的根拠と視覚言語モデルの文脈理解を組み合わせたエージェントDriveJudgeを提案し、大規模データセットで人間の判断と高い一致を示した。
- Cosmos 3: 物理AIのための全モーダル世界モデルVLA2026/6/1
言語、画像、動画、音声、行動を統一的に扱う全モーダル世界モデルを提案し、理解・生成タスクでSOTAを達成した。
- ViPE: 3D幾何知覚のための動画ポーズ推定エンジン3D知覚2025/8/1
未校正の生動画からカメラ内部パラメータ・運動・密な深度を推定する汎用エンジンViPEを提案し、大規模動画データセットに正確な3Dアノテーションを付与して公開した。
- Cosmos-Transfer1:適応的マルチモーダル制御による条件付きワールド生成sim2real2025/3/1
セグメンテーション・深度・エッジなど複数モダリティの空間制御入力を場所ごとに重み付けして世界シミュレーションを生成するモデルを提案し、ロボティクスのSim2Realや自動運転データ拡張への応用とリアルタイム推論を実証した。
- ニューラルレンダリングによる自動運転向け転移可能な敵対的シミュレーションシナリオの生成自動運転/敵対的攻撃/sim2real2023/9/1
ニューラルレンダリングでシーンに物体を注入しテクスチャを最適化することで、自動運転ポリシーを失敗させる敵対的シナリオを生成し、実環境へ転移できることを示した。
- 微分可能シミュレーションによる物性推定と視覚運動制御sim2real2021/4/1
微分可能なマルチフィジックスシミュレーションと微分可能レンダリングを組み合わせ、動画のピクセルから直接、質量・摩擦・弾性などの物理特性を推定するフレームワークgradSimを提案。3D教師信号なしで視覚運動制御タスクの学習も可能にする。
- 探索と転移のための潜在スキル計画強化学習/スキル転移2020/11/1
学習済み世界モデルとスキルを統合し、テスト時にスキルをオンライン計画で選択することで、歩行タスクのサンプル効率と転移性能を向上させた強化学習エージェントを提案。
- ハイパーネットワークによる継続的モデルベース強化学習モデルベース強化学習2020/9/1
タスク条件付きハイパーネットワークを用いて、過去データを再訪せずに力学モデルを継続学習するHyperCRLを提案し、ロボットの歩行や操作タスクで有効性を示した。
- CEMと勾配降下を組み合わせたモデル予測制御モデル予測制御2020/4/1
CEMと勾配降下を交互に適用して行動系列を最適化する計画手法を提案し、高次元行動空間でも収束が速く局所解を回避できることを示した。
