Yuzhe Qin
収録論文 34本 ・ フィジカルAI/ロボット学習
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- AdaDexTrack: 適応的で汎化可能な巧みな操作トラッキングのための動的変調マニピュレーション2026/10/24
言語指示による手先の巧みな操作を「変調付きトラッキング」として捉え、参照・物体表現・位置目標をオンラインで補正するモジュレータを強化学習で訓練し、未見軌道や実機へのゼロショット転移で高い頑健性を示した研究。
- 身体性エージェントは何を記憶すべきか?記憶モダリティのベンチマークと評価身体性エージェント記憶2026/10/8
身体性エージェントの記憶モダリティを評価するベンチマークMeMoREvalを提案し、フレーム記憶が生成説明より低コストで高性能、シーングラフ併用が最高精度と示した。
- PGDG: 単一デモからの堅牢な両腕ポリシー学習のための物理的根拠に基づくデータ生成両腕操作/データ生成/行動クローニング2026/5/1
単一のデモンストレーションから、物理的に妥当で成功する多様な回復行動を含むデータセットを自動生成し、両腕操作の行動クローニングの堅牢性を向上させるフレームワークを提案した。
- Dex1B: 10億件のデモンストレーションによる巧みな手の操作学習マニピュレーション2025/6/1
生成モデルを用いて把持と関節操作の10億件のデモンストレーションを生成し、シミュレーションと実機で従来手法を上回る性能を示した。
- DexTrack: 人間参照からの汎化可能な巧みな操作のためのニューラル追従制御マニピュレーション2025/2/1
人間の手と物体の動きを参照として、多様な物体を巧みに操作するロボットハンドのニューラル追従制御器を、強化学習と模倣学習を組み合わせて訓練する手法を提案。
- ManiSkill3: 汎化可能な身体性AIのためのGPU並列ロボティクスシミュレーションとレンダリングsim2real2024/10/1
接触の多い操作タスク向けに、シミュレーションとレンダリングをGPUで並列化した高速ロボティクスシミュレータManiSkill3を開発し、12分野の多様なタスクとデモデータ、ベースラインを提供した。
- ACE:低コストな器用テレオペレーションのためのクロスプラットフォーム視覚外骨格システムテレオペレーション2024/8/1
手の3D姿勢をカメラと外骨格で捉え、人型ハンドやグリッパなど多様なロボットに汎用できる低コストなテレオペレーションシステムを開発した。
- Bunny-VisionPro:模倣学習のためのリアルタイム両手巧みな遠隔操作遠隔操作2024/7/1
VRヘッドセットと低コスト触覚フィードバックデバイスを用いて、両手巧みな遠隔操作をリアルタイムで実現し、模倣学習の性能を向上させるシステムを提案。
- パート誘導型3D強化学習による関節物体操作のSim2Realsim2real2024/4/1
2Dセグメンテーションと3D強化学習を組み合わせ、実機での関節物体操作をデモなしで学習するフレームワークを提案。不確実性を考慮したサンプリングで実機での安定性を向上させた。
- 触覚強化学習による未知物体のSim2Realマニピュレーションsim2real2024/3/1
多様な物体をシミュレータ上で触覚入力を用いた強化学習により訓練し、未知物体への汎化と実機転移を実現する手法を提案。
- CyberDemo: シミュレーション上の人間デモンストレーションを拡張する実世界巧みな操作sim2real2024/2/1
シミュレーション内で人間のデモンストレーションを大規模にデータ拡張し、実世界の巧みな操作タスクへ転移する模倣学習手法を提案。未見の物体にも汎化し、実世界のデモより高い成功率を示した。
- DexTouch: 触覚で物体を探り操作する器用なマニピュレーション触覚2024/1/1
視覚に頼らず触覚のみで暗所のランダムな物体を探索・操作する多指ロボットシステムを提案し、シミュレーションでの強化学習を実機に転移して触覚の重要性を示した。
- ロボット共感覚:視触覚センシングによるハンド内マニピュレーションマニピュレーション2023/12/1
視覚と触覚を統合した点群ベースの触覚表現「Robot Synesthesia」を提案し、シミュレーションで学習して実機に転移することで、様々なハンド内物体回転タスクを実現した。
- GenSim: 大規模言語モデルによるロボットシミュレーションタスクの生成sim2real2023/10/1
大規模言語モデルを活用して、ロボットシミュレーションの多様なタスクと専門家デモを自動生成する手法を提案し、タスクレベルの汎化性能を大幅に向上させた。
- ダイナミックハンドオーバー:双腕ハンドによる投擲と捕球マニピュレーション2023/9/1
双腕マルチフィンガーハンドで物体を高速に投げて受け渡す動作を、マルチエージェント強化学習とSim2Real転移で実現した。
- AnyTeleop:汎用視覚ベースの器用なロボットアーム・ハンド遠隔操作システム遠隔操作2023/7/1
様々なロボットアームやハンド、シミュレータ、実機、カメラ構成に対応する汎用的な視覚ベース遠隔操作システムを提案し、特定ハードウェア向けの従来システムを上回る性能を示した。
- DexArt: 関節物体を用いた汎化可能な巧みな操作のベンチマークマニピュレーション2023/5/1
多指ロボットハンドで多様な関節物体を操作するベンチマークDexArtを提案し、3D表現学習と強化学習を組み合わせて未知物体への汎化性能を評価した。
- ContactArt: カテゴリーレベルの関節物体と手の姿勢推定のための3Dインタラクションプライアの学習姿勢推定2023/5/1
視覚的テレオペレーションで収集したデータセットと、関節物体と手の姿勢推定のための3Dインタラクションプライア(GANと拡散モデル)を学習する手法を提案し、実世界データへの転移で性能を大幅に改善した。
- EasyHeC: 微分可能レンダリングと空間探索による高精度で自動的なハンドアイキャリブレーションキャリブレーション2023/5/1
微分可能レンダリングと一貫性に基づく関節空間探索を組み合わせ、マーカー不要で高精度なハンドアイキャリブレーションを自動で行う手法を提案した。
- 見ずに回す:触覚によるハンド内巧みさ触覚2023/3/1
手全体に配置した低コストな二値触覚センサのみを用い、視覚なしで未知物体をハンド内で回転させる強化学習システムを提案。
- DexPoint: 実世界の新しい物体に汎化する点群強化学習による巧みな操作マニピュレーション2022/11/1
点群入力と巧みなハンドで操作方策を訓練し、想像上の手の点群と接触ベースの報酬で複数物体への学習とsim-to-real汎化を実現した。
- ニューラル表面再構成を用いたロバスト物体把持のためのReal2Sim2Real手法マニピュレーション2022/10/1
実世界の点群からニューラル表面再構成で高品質メッシュを作り、シミュレーションで把持ラベルを生成して把持ネットワークを学習し、実環境でロバストに把持するReal2Sim2Realパイプラインを提案。
- 抽象から実行可能な軌道への翻訳によるワンショットタスク汎化マニピュレーション2022/10/1
複雑な長期的タスクを、抽象環境での計画生成と実行を分離し、seq-to-seqモデルで抽象軌道を実行可能な軌道に翻訳することで、未見タスクへのワンショット汎化を実現した。
- 人間の実演から連続的把持動作関数を学習する多指ハンドマニピュレーション2022/7/1
人間の物体操作軌道をロボットに再ターゲットし、条件付きVAEで連続時間の把持計画を生成するモデルCGFを学習、実機のAllegro Handで成功率を大きく改善した。
- 片手から多指ハンドへ:単一カメラ遠隔操作による器用な操作の模倣学習模倣学習/遠隔操作2022/4/1
iPadとPCだけの単一カメラ遠隔操作で3D実演データを収集し、ユーザーごとにカスタマイズしたシミュレータ上のロボットハンドで多指ハンド操作の模倣学習を行い、実機への転移性能を大幅に向上させた。
- 物理ベースのアクティブステレオセンサシミュレーションで光学センシングのドメインギャップを埋めるsim2real2022/1/1
アクティブステレオ深度センサを物理法則に基づきシミュレーションし、実機に近い材質依存の誤差パターンを持つ深度画像をリアルタイム生成するパイプラインを構築した。シミュレーションで学習した認識アルゴリズムや強化学習方針が実世界へファインチューニングなしで転移することを示した。
- マルチモーダル遅延ランダム化による視覚誘導四足歩行の実環境展開歩行2021/9/1
視覚と固有感覚の遅延をランダム化してRLを訓練し、A1四足ロボットを実世界の複雑地形で滑らかに走行・障害物回避させることに成功した。
- DexMV: 人間の動画から器用な操作を模倣学習する模倣学習2021/8/1
多指ロボットハンドの複雑な操作タスクを対象に、人間の手の動画から3D姿勢を抽出してロボットのデモンストレーションへ変換するパイプラインを構築し、模倣学習の有効性を示した研究。
- 単一RGB-Dカメラによる汎用ロボットマニピュレーションの遠隔操作遠隔操作2021/6/1
1台のRGB-Dカメラで人間の動きを捉え、布畳みやハンマー作業、3mmクリアランスのペグ挿しなど汎用作業を遠隔操作できるシステムを提案した論文。
- O2O-Afford: アノテーション不要の大規模物体間アフォーダンス学習アフォーダンス2021/6/1
物理シミュレーションとShapeNetモデルで物体同士の相互作用タスク環境を構築し、人手アノテーションなしで物体間アフォーダンスを学習する枠組みを提案した論文。
- OCRTOC:クラウド型ロボット把持・操作ベンチマークベンチマーク2021/4/1
同一の実機ロボット環境をクラウド経由で提供し、卓上整理タスクの標準化シナリオでアルゴリズムを公平に評価・比較できるベンチマークと競技会を構築した。
- SAPIEN:関節物体を備えた物理シミュレーション環境sim2real2020/3/1
家庭用ロボットの学習向けに、関節を持つ多数の物体を収めた物理的にリアルなシミュレーション環境SAPIENを構築し、部品検出や動作属性認識、強化学習による操作タスクを評価した。
- 混雑環境におけるアモーダル単視点単発SE(3)把持検出把持検出2019/10/1
単一視点の深度画像から混雑環境での6自由度把持を学習ベースで検出する単発ネットワークを提案し、合成データと実環境で従来手法を大きく上回る性能を示した。
- タスク非依存スキルの深層強化学習による合成強化学習2019/5/1
深層強化学習で学習した基本スキルを組み合わせ、未知のタスクを少ないデータで解くスキル転移・合成手法を提案した論文。
