Tongzhou Mu
収録論文 15本 ・ フィジカルAI/ロボット学習
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- 巧みな操作のためのクロスエンボディメント世界モデルのスケーリングマニピュレーション2025/11/1
人間とロボットの手を3D粒子で表現し、エンドエフェクタの粒子変位場を行動として定義することで、異なる身体構造を超えて共有できる世界モデルを学習し、新しいハードウェアでの操作制御を実現した。
- ロボット歩行における身体性スケーリング則への試み歩行2025/5/1
約1000種のロボット身体を手続き的に生成し、多様な身体で訓練するほど未知の身体への汎化が向上することを歩行タスクで示し、実機のUnitree Go2やH1にもゼロショット転移した。
- デモンストレーション拡張型報酬・方策・世界モデル学習による多段階マニピュレーションマニピュレーション2025/3/1
視覚入力からの長期的マニピュレーションタスクに対し、多段階の密報酬学習と世界モデルを組み合わせたデモンストレーション活用型強化学習フレームワークDEMO3を提案し、データ効率を大幅に改善した。
- 応答性ノイズリレー拡散ポリシー:応答的で効率的な視覚運動制御VLA2025/2/1
拡散ポリシーの応答性を高めるため、ノイズレベルを段階的に増やすバッファと逐次ノイズ除去を導入し、最新の観測に基づく即時行動生成を可能にした手法を提案。
- ポリシーデコレーター:大規模ポリシーモデルのためのモデル非依存オンライン改良模倣学習2024/12/1
模倣学習で訓練済みの大規模ポリシーに対し、モデル非依存の残差ポリシーをオンラインで学習させて性能を安定かつサンプル効率よく向上させる手法を提案。
- 状態から視覚へのDAggerと視覚強化学習はいつ選ぶべきか?VLA2024/12/1
状態方策を事前学習してからオンライン模倣で視覚方策を学ぶ2段階手法State-to-Visual DAggerと視覚RLを16タスクで比較し、難タスクではDAggerが安定して優れるがサンプル効率の利点は限定的だと示した実証研究。
- ManiSkill3: 汎化可能な身体性AIのためのGPU並列ロボティクスシミュレーションとレンダリングsim2real2024/10/1
接触の多い操作タスク向けに、シミュレーションとレンダリングをGPUで並列化した高速ロボティクスシミュレータManiSkill3を開発し、12分野の多様なタスクとデモデータ、ベースラインを提供した。
- DrS: 多段階タスクのための再利用可能な密報酬の学習強化学習/報酬設計2024/4/1
タスクの段階構造を利用し、スパース報酬とデモから高品質な密報酬を学習して、未見タスクでも再利用可能にする手法を提案。
- AdaDemo: 汎用ロボットエージェントのためのデータ効率的なデモンストレーション拡張模倣学習2024/4/1
既存方策の弱点を特定し、適応的にデモンストレーションを収集・拡張することで、データ効率的に多タスク模倣学習を改善するフレームワークAdaDemoを提案。
- デモンストレーションによる強化学習と計画の強化:サーベイ強化学習2023/3/1
専門家のデモンストレーションを強化学習や計画に活用する手法と収集方法を整理し、ManiSkillベンチマークでの実践例を示したサーベイ論文。
- ManiSkill2: 汎化可能なマニピュレーションスキルのための統合ベンチマークマニピュレーション2023/2/1
多様な物体形状と完全動的シミュレーションを備えた20種の操作タスク群からなる次世代ベンチマークを構築し、RLやILなど多様なアルゴリズムを統一的に評価できるようにした。
- 視覚運動制御における事前学習の再検討:スクラッチ学習ベースラインの再評価視覚運動制御2022/12/1
視覚運動制御タスクにおいて、データ拡張と浅いConvNetを用いた単純なスクラッチ学習ベースラインが、大規模視覚データセットで事前学習した表現を用いる最近の手法(PVR, MVP, R3M)と競合することを示し、事前学習データとベンチマーク間のドメインギャップの影響を明らかにした。
- 抽象から実行可能な軌道への翻訳によるワンショットタスク汎化マニピュレーション2022/10/1
複雑な長期的タスクを、抽象環境での計画生成と実行を分離し、seq-to-seqモデルで抽象軌道を実行可能な軌道に翻訳することで、未見タスクへのワンショット汎化を実現した。
- 物理ベースのアクティブステレオセンサシミュレーションで光学センシングのドメインギャップを埋めるsim2real2022/1/1
アクティブステレオ深度センサを物理法則に基づきシミュレーションし、実機に近い材質依存の誤差パターンを持つ深度画像をリアルタイム生成するパイプラインを構築した。シミュレーションで学習した認識アルゴリズムや強化学習方針が実世界へファインチューニングなしで転移することを示した。
- ManiSkill: 大規模デモンストレーション付き汎用マニピュレーション技能ベンチマークマニピュレーション2021/7/1
多様な3D形状の物体を扱う操作技能を評価する物理シミュレータベンチマークを提案し、約3.6万軌道のデモと3D深層学習・模倣学習のベースラインを提供した。
