Tingnan Zhang
収録論文 46本 ・ フィジカルAI/ロボット学習
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- Gemini Robotics 1.5:高度な身体性推論・思考・動作転移で汎用ロボットの最前線を押し広げるVLA2025/10/1
異種ロボットデータから学ぶ動作転移機構と自然言語での多段階推論を組み合わせたVLAモデルと、身体性推論に特化したモデルを発表し、複雑な多段階タスクの実行と解釈性を向上させた。
- 知覚と行動をつなぐ:ロボットの汎化のための空間的に接地された中間表現マニピュレーション2025/6/1
物体中心性・姿勢認識・深度認識という中間表現を専門家エンコーダで学習し、その混合専門家ポリシーで実世界の両手巧み操作タスクの汎化性能を向上させた研究。
- Human2LocoMan: 人間データの事前学習による多様な四足歩行ロボットのマニピュレーション学習マニピュレーション2025/6/1
人間と四足ロボットLocoManのデータを統合した遠隔操作・データ収集パイプラインとモジュール型アーキテクチャを構築し、人間データでの事前学習により実世界タスクの成功率を大幅に向上させた。
- LocoTouch:触覚センシングによる動的四足歩行運搬の学習触覚2025/5/1
四足ロボットの背中全体を覆う高密度触覚センサと高忠実度シミュレーションを組み合わせ、固定されていない円筒物体を長距離運搬する触覚対応歩容ポリシーを学習させ、実機へゼロショット転移した。
- Chain-of-Modality: マルチモーダル人間動画と視覚言語モデルによる操作プログラムの学習VLA2025/4/1
筋電アームバンドやマイクなどで計測した人間の操作動画から、視覚言語モデルがタスク計画と力などの制御パラメータを抽出し、ロボットに操作タスクを実行させる手法を提案した。
- QuietPaw: 多様なノイズ選好に適応する四足歩行の学習歩行2025/3/1
ノイズ低減レベルを条件として与えることで、単一の四足歩行ポリシーが再学習なしに機敏さと足音の静かさのトレードオフを連続的に調整できる学習手法を提案し、実機で検証した。
- Gemini Robotics:AIを物理世界へVLA2025/3/1
Gemini 2.0を基盤に、ロボットを直接制御できる汎用VLAモデル「Gemini Robotics」と、空間・時間理解を強化した推論モデル「Gemini Robotics-ER」を提案した論文。
- 六脚ロボットの多様な移動スキル歩行2024/12/1
深度カメラとVIOを搭載した六脚ロボットが、階段昇降・障害物回避・テーブル下のすり抜けをシミュレーションのみで学習し、実機で高い成功率を達成した。
- 長期的な四足歩行ロボットの押し操作のためのマルチエージェント移動マニピュレーション学習マニピュレーション2024/11/1
複数の四足歩行ロボットが障害物を避けながら長期的な押し操作を行うための階層型マルチエージェント強化学習フレームワークを提案し、実機で成功を実証した。
- 視覚言語モデルは文脈内価値学習器であるVLA2024/11/1
視覚言語モデルにシャッフルした動画フレームの時系列順序を予測させることで、ロボットやタスク固有の訓練なしに300以上の実世界タスクの進捗を推定できる汎用価値関数を実現した。
- IPPON: 常識に導かれた情報経路計画による物体目標ナビゲーション物体目標ナビゲーション2024/10/1
大規模言語モデルの常識事前知識と3D物体確率マッピングを組み合わせ、未知環境で対象物体へ効率的に到達するゼロショットの経路計画手法を提案し、実機でも検証した。
- 不連続地形における俊敏な連続跳躍歩行2024/9/1
四足歩行ロボットが階段や飛び石などの不連続地形で、高さ予測・強化学習・モデルベース制御を組み合わせて俊敏かつ連続的に跳躍できる階層型フレームワークを開発した。
- Mobility VLA:長文脈VLMとトポロジカルグラフによるマルチモーダル指示ナビゲーションナビゲーション/VLA2024/7/1
デモ動画と自然言語・画像の指示を入力とし、長文脈VLMで目標フレームを特定、トポロジカルグラフに基づく低レベル方策で実環境をナビゲートする階層型VLAを提案した。
- LocoMan: 軽量ロコ・マニピュレータによる四足歩行ロボットの器用な操作能力の向上マニピュレーション2024/3/1
四足歩行ロボットの前脚に軽量な3自由度グリッパを取り付け、脚の移動能力と操作能力を統合した全身制御フレームワークを提案し、狭い空間でのドア開けやコンセント挿しなどの器用な作業を実現した。
- PIVOT: 反復的視覚プロンプティングによるVLMの行動知識の引き出しVLA2024/2/1
視覚言語モデルに対し、候補となる行動や軌道を画像上に重ねて反復的に選ばせる視覚プロンプティング手法PIVOTを提案し、追加学習なしでロボットのナビゲーションや操作を実現した。
- 言語モデル予測制御による人間フィードバックからの高速学習VLA2024/2/1
人間との対話履歴を遷移モデルとしてLLMに微調整し、モデル予測制御と組み合わせることで、ロボットの教示効率と成功率を向上させるフレームワークLMPCを提案。
- 大規模言語モデルによる創造的なロボットの道具使用VLA2023/10/1
大規模言語モデルを活用し、自然言語指示からロボット制御コードを生成して、暗黙の物理制約や長期計画を伴う課題で創造的に道具を使うRoboToolを開発した。
- 急勾配な粒状斜面を高速旋回するMini Roverの操作学習走行制御/ベイズ最適化2023/10/1
小型ローバーがケシの実の急斜面で旋回できるよう、車輪の持ち上げ・掃引・回転を組み合わせた歩容をベイズ最適化で探索し、約4秒で90度旋回を実現した研究。
- 微分動的計画法におけるマルチプルシューティングの統一的理解軌道最適化2023/9/1
微分動的計画法(DDP)をマルチプルシューティングに拡張し、初期推定へのロバスト性を高める新たな導出法を提案。ペナルティ法や適応的メリット関数で収束性能を改善し、四足ロボットの動的跳躍MPCなどで有効性を示した。
- 言語から報酬へ:ロボットスキル合成の新パラダイムVLA2023/6/1
大規模言語モデルに報酬関数のパラメータを生成させ、それをリアルタイム最適化器で最適化することで、言語指示から多様なロボット動作を実現する手法を提案。
- オフライン安全強化学習のためのデータセットとベンチマークオフライン強化学習/安全RL2023/6/1
ロボット制御から自動運転まで38タスクにわたるオフライン安全強化学習のデータセット・環境ラッパー・ベースライン実装を提供し、大規模実験で性能を比較評価したベンチマークスイートを構築した。
- CAJun: 学習型重心制御器による連続適応ジャンプ歩行2023/6/1
強化学習で重心方策を学習し最適制御の脚制御器と組み合わせることで、脚ロボットが距離を適応させながら連続ジャンプできる階層型フレームワークを実現した。
- 屋内シミュレーションから屋外実環境へのゼロショット移動学習ナビゲーション2023/5/1
屋内シミュレーションのみで訓練した視覚ナビゲーション方策に、衛星地図や手描きスケッチなどの粗いコンテキストマップを与えることで、屋外の未知環境を数百メートルにわたり衝突なく移動できることを示した。
- Barkour:四足ロボットの動物レベル敏捷性を測るベンチマーク歩行2023/5/1
犬のアジリティ競技に着想を得た障害物コース「Barkour」を提案し、強化学習とTransformerベースの汎用歩行ポリシーで犬の半分の速度で完走できることを示した。
- 学習した行動残差による連続的な多様ジャンプ歩行2023/4/1
最適制御と強化学習を組み合わせた階層的枠組みで、四足ロボットがシミュレーションから実機へ直接展開でき、最大50cmの高さ・60cmの前方・90度の旋回を含む多様で連続的なジャンプ動作を実現した。
- 制約付き決定トランスフォーマーによるオフライン安全強化学習オフライン安全RL2023/2/1
オフラインデータから安全な方策を学習するため、多目的最適化の観点から制約付き決定トランスフォーマー(CDT)を提案し、展開時に安全性と性能のトレードオフを動的に調整できるようにした。
- 強化学習と全身軌道最適化によるロボットのテーブル拭きマニピュレーション2022/10/1
視覚観測からこぼれやパンくずの不確かな動態を考慮しつつ、強化学習で拭き動作を計画し、全身軌道最適化で安全な動作を実現する枠組みを提案した。
- ジェスチャーを理解するナビゲーションのための模倣学習社会的ナビゲーション2022/9/1
画像ベースの模倣学習とモデル予測制御を組み合わせ、人間のジェスチャーを解釈して社会的に適切なナビゲーションを実現する手法を提案し、実機で検証した。
- Performer-MPC: 実世界ナビゲーションのためのリアルタイム注意機構を用いたモデル予測制御器の学習ナビゲーション2022/9/1
低ランク注意機構Transformerで視覚文脈を埋め込み、学習したコスト関数とMPCを組み合わせて実世界の混雑環境や人混みでのナビゲーション性能を向上させた。
- ハイブリッド系DDPを用いたキノダイナミックMPCによる汎用リアルタイム動作生成歩行2022/9/1
四足ロボットの跳躍や走行などの俊敏な動作を、ハイブリッド運動力学モデルに基づく非線形MPCでオンライン再計画し、リアルタイムで生成・遷移させる手法を提案した。
- ハイブリッド運動力学モデル予測制御による学習済み四足歩行ポリシーのゼロショット転移歩行2022/9/1
強化学習で得た四足歩行ポリシーを、MPCと組み合わせることで、再学習なしに異なる機体へ転移できるフレームワークを提案した。
- 狭所における自律地上ナビゲーション:ICRA 2022 BARNチャレンジからの教訓ナビゲーション2022/8/1
ICRA 2022で開催されたBARNチャレンジでは、狭く制約の厳しい環境でロボットを安全かつ効率的にナビゲートする自律地上ナビゲーションシステムを評価し、上位チームの手法と課題を分析した。
- PI-ARS:予測情報表現で進化学習による視覚運動制御を加速歩行2022/7/1
勾配ベースの予測情報表現学習と進化戦略ARSを組み合わせ、四足ロボットの視覚に基づく不整地歩行やナビゲーションを効率的に学習させ、実機でも高い成功率を達成した。
- 人間のデモンストレーションから意味論を考慮した歩行スキルを学習歩行2022/6/1
四足歩行ロボットがカメラ画像から地形の意味を認識し、人間のデモを用いて速度と歩容を選択する枠組みを提案。実世界で40分のデモデータのみで学習し、6km以上の走破を達成した。
- 敵対的モーションプライアが複雑な報酬関数の代替となる歩行2022/3/1
モーションキャプチャデータから学習したスタイル報酬をタスク報酬と組み合わせ、複雑な手設計報酬なしに実機四足ロボットへ転移可能な自然な歩容を獲得した研究。
- 脚式移動のための安全強化学習歩行2022/3/1
安全復帰ポリシーと学習ポリシーを切り替える枠組みを提案し、四足ロボットの転倒を減らしつつ実機で歩容・バランス性能を向上させた。
- 学習による歩容遷移で実現する高速・高効率な四脚ロボットの移動歩行2021/4/1
エネルギー最小化の報酬だけで歩容と歩容遷移が自動獲得される階層型学習フレームワークを提案し、四脚ロボットで歩行からトロット、フライトロットへの遷移を実現した。
- 効率的注意機構で視覚強化学習を高解像度化する視覚強化学習2021/2/1
効率的な注意アルゴリズムを強化学習に導入し、注意ボトルネック型の視覚エージェントを高解像度入力や小さなパッチ(画素単位)までスケール可能にし、汎化性能を向上させた。
- SimGAN:敵対的強化学習によるハイブリッドシミュレータ同定とドメイン適応sim2real2021/1/1
ニューラルネットと物理シミュレーションを組み合わせたハイブリッドシミュレータを敵対的強化学習で同定し、手動設計なしにsim-to-realなどのドメイン適応を実現するフレームワークを提案。
- 動物の模倣による俊敏な脚式ロボット移動スキルの学習歩行2020/4/1
実在動物の参照モーションを模倣する模倣学習により、脚式ロボットが多様な俊敏移動行動を自動獲得し、シミュレーションで学習した方策を実機へ素早く適応できることを示した。
- 階層的予測計画による分散型マルチエージェントランデブーマルチエージェント強化学習2020/3/1
エージェント間の通信なしに、他エージェントの動きを自己教師あり学習で予測し、その予測モデルを用いてサブゴールを提案・評価することで分散型ランデブーを実現するモデルベース強化学習手法を提案した。
- 方策による軌道生成器の変調歩行2019/10/1
単純な方策でパラメトリックな軌道生成器を変調するアーキテクチャを提案し、四足歩行ロボットの速度制御歩行をIMU観測のみから強化学習で獲得、実機にも転移した。
- 三人称視点の人間デモからの脚式ロボット視覚ナビゲーションのゼロショット模倣学習模倣学習2019/9/1
人間の三人称視点デモを用い、視点不変特徴を抽出する特徴分離ネットワークとモデルベース模倣学習により、脚式ロボットの視覚ナビゲーション方策をゼロショットで学習する手法を提案した。
- 4.5分のデータで四足歩行を実現するモデルベース強化学習歩行2019/7/1
四足ロボットの歩行をわずか4.5分の実機データで学習するモデルベース手法を提案し、複数ステップ予測損失と遅延対応MPC、脚軌道の事前知識でリアルタイムかつ安全な歩行を実現した。
- 四足歩行ロボットの俊敏な移動をシミュレーションから実世界へ学習させるsim2real2018/4/1
深層強化学習で四足歩行の制御をシミュレーション上で学習し、シミュレータ改良とロバスト方策で実機に転移させ、トロットとギャロップを実現した。
- 移動のロボフィジクス:ロボティクス・ソフトマター・力学系の交差点における移動研究のレビュー歩行2016/2/1
移動するシステムの物理学「ロボフィジクス」を提唱し、簡略化したロボット実験と力学系理論を組み合わせて生命のような移動原理を探る研究動向をレビューした論文。
