Bokui Shen
収録論文 7本 ・ フィジカルAI/ロボット学習
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- SAGE: 意味的パーツと動作可能パーツを橋渡しする関節物体の汎化マニピュレーションマニピュレーション2023/12/1
関節物体の意味的パーツと動作可能パーツを対応付けるGAPartsを導入し、大規模視覚言語モデルと小型専門モデルを組み合わせて自然言語指示に基づく汎化可能な操作を実現するフレームワークを提案。
- ドーナツを作ろう:ツールを用いたゼロショット変形操作のための階層的EMD空間計画変形操作2023/11/1
大規模言語モデルでタスクを段階的に計画し、微分可能物理とEMD空間の損失を用いた閉ループ制御で、訓練なしにツールを使った変形物体操作を実現する手法を提案。
- GINA-3D: 実世界データから暗黙的ニューラルアセットを生成する学習3D生成2023/4/1
カメラとLiDARの実走行データから、多様な車両や歩行者のリアルな3D暗黙的ニューラルアセットを生成するモデルGINA-3Dを提案。
- COPILOT: 一人称視点動画からの人と環境の衝突予測と位置推定一人称視覚/衝突予測2022/10/1
一人称視点の多視点動画から、体のどの関節が環境と衝突するかと衝突領域を予測するTransformerモデルCOPILOTを提案し、大規模合成データセットで学習して実世界シーンにも汎化することを示した。
- ACID: 変形物体操作のための行動条件付き暗黙的視覚ダイナミクス変形物体操作2022/3/1
ぬいぐるみや生地のような体積変形物体を対象に、占有と流れの暗黙表現と測地線ベースの対照学習を組み合わせた行動条件付き視覚ダイナミクスモデルを提案し、目標条件付き変形操作の成功率を30%向上させた。
- iGibson 2.0: 家庭内タスク学習のための物体中心シミュレーション環境sim2real2021/8/1
温度・濡れ・汚れ・切断などの物体状態と述語論理を導入し、多様な家庭内タスクを自動生成できるオープンソースのロボット学習用シミュレータを提案した。VRによる人間デモ収集にも対応する。
- iGibson 1.0:大規模リアルシーンでのインタラクティブタスク向けシミュレーション環境シミュレーション環境2020/12/1
実世界の家庭を再現した15のインタラクティブなシーンと多様なセンサ信号・ドメインランダム化・動作計画・人間デモ収集機能を備えたロボット学習用シミュレータを公開した論文。
