Soumith Chintala
収録論文 12本 ・ フィジカルAI/ロボット学習
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- YOR: 汎用ロボティクス研究のための自作モバイルマニピュレータモバイルマニピュレーション2026/2/1
全方向移動ベース・伸縮リフト・双腕を組み合わせた低コスト(1万ドル以下)のオープンソース移動マニピュレータを開発し、全身協調動作や双腕操作、自律ナビゲーションを実証した。
- 接触アンカーポリシー:接触条件付けによる強力なロボットユーティリティモデルマニピュレーション2026/2/1
言語指示の代わりに空間上の接触点を条件として使い、モジュール型ユーティリティモデル群として構成した操作ポリシーCAPを提案。軽量シミュレータEgoGymでの実機-シミュレーション反復により、23時間のデモデータのみで新環境・新機体にゼロショット汎化し、最先端VLAを56%上回る。
- DynaMem: オープンワールド移動マニピュレーションのためのオンライン動的時空間セマンティックメモリ移動マニピュレーション2024/11/1
ロボットが環境の変化に合わせて3Dメモリを動的に更新し、移動・出現・消滅する物体を扱えるようにする手法を提案。実機で非静止物体のピック・アンド・ドロップ成功率70%を達成した。
- ロボットユーティリティモデル:新環境へのゼロショット展開のための汎用ポリシーマニピュレーション2024/9/1
ファインチューニングなしで新しい環境や未知の物体に直接適応できるゼロショットロボットポリシーを訓練・展開するフレームワークを提案し、5つの実用的タスクで平均90%の成功率を達成した。
- OPEN TEACH:ロボットマニピュレーション向け汎用テレオペレーションシステムテレオペレーション2024/3/1
Meta Quest 3を使った低コストなVRテレオペレーションシステムを開発し、多指ハンドや双腕ロボットを最大90Hzで直感的に操作可能にした。38タスクで有効性を示し、収集データが10の器用な接触操作タスクの模倣学習に使えることを実証した。
- 家庭用ロボットの実現に向けて:Dobb-Eと汎用マニピュレーション学習マニピュレーション2023/11/1
安価なデモ収集ツール「The Stick」と家庭環境で事前学習した表現を用い、5分の実演と15分の適応で新しい家事タスクを学習できる汎用ロボットシステムDobb-Eを提案し、実家庭で81%の成功率を達成した。
- 視覚から触覚へ:視覚的インセンティブによる触覚巧緻性の学習マニピュレーション2023/9/1
視覚表現から報酬を設計し、触覚ベースの巧緻な操作方策を強化学習で最適化するフレームワークTAVIを提案。4本指ハンドで6つの難タスクにおいて高い成功率を達成した。
- 触覚から生まれる器用さ:ロボット遊びによる触覚表現の自己教師あり事前学習マニピュレーション2023/3/1
ロボットの遊びデータで触覚表現を自己教師あり学習し、視覚と組み合わせることで、多指ハンドの繊細な操作タスクを従来の視覚・トルクベース手法より平均1.7倍の成功率で実現した。
- 実世界における物体へのナビゲーションナビゲーション2022/12/1
家庭環境6軒で古典・モジュラー・エンドツーエンドの意味的視覚ナビゲーション手法を比較し、モジュラー学習が90%の成功率を達成する一方、エンドツーエンド学習はシミュレーションから実世界で77%から23%に低下することを示した。
- Holo-Dex: 没入型複合現実による器用さの教示マニピュレーション2022/10/1
市販のVRヘッドセットで手の動きを計測し、ロボットの巧みな操作を遠隔操作で教示・学習するフレームワークを提案。
- CLIP-Fields: ロボット記憶のための弱教師あり意味場VLA2022/10/1
CLIPやDeticなどWeb学習済みモデルのみを教師に使い、空間位置から意味埋め込みへの写像を学習する暗黙的シーン表現を提案。これをシーン記憶としてロボットが実環境で意味的ナビゲーションを行えることを示した。
- droidlet:モジュール式ヘテロジニアス・マルチモーダルエージェント基盤マルチモーダルエージェント2021/1/1
知覚・言語・行動を一つのプラットフォームに統合し、大規模静的データとロボティクスのヒューリスティクスを組み合わせたモジュール式エージェント基盤droidletをオープンソース化した。
