Ziyuan Jiao
Beijing Institute for General Artificial Intelligence (BIGAI)
収録論文 31本 ・ フィジカルAI/ロボット学習
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- 力の色変化を直接捉えるフォトニック結晶触覚センサーPCTac触覚2026/11/9
メカノクロミックなフォトニック結晶を指先触覚センサーとして用い、荷重を色相の変化として直接観測して拡散ポリシーに組み込み、実機マニピュレーションでRGBや視覚のみより高い成功率を示した研究。
- Touch2Robot: 人間のデモンストレーションループにロボットの触覚を統合触覚2026/9/21
人間の手の動きと触覚グローブの計測から、対象ロボットハンドの接触をシミュレーション上で可視化し、デモ中にフィードバックすることで、ロボットへの転移性能とデータ収集効率を向上させるフレームワーク。
- Ego2Robot: 自己中心視点の人間データからのスケーラブルなロボットデータ合成VLA2026/8/1
自己中心視点の人間の操作動画を、行動リターゲティングとロボットアームの視覚合成、品質キュレーションを経てロボット訓練データに変換するスケーラブルなパイプラインを提案し、大規模データセットでVLAモデルの汎化性能を向上させた。
- CAAT: 接触認識アテンションスケーリングと触覚マスキングによるデータ効率的な接触リッチ操作マニピュレーション2026/8/1
視覚と触覚を統合するTransformerベースのポリシーに、接触前後で情報の重みを切り替える接触認識アテンションスケーリングと動的触覚マスキングを導入し、デモからの学習効率と成功率を向上させた。
- DexMani: 人間由来の操作性ガイダンスによる器用な回転操作マニピュレーション2026/8/1
人間のデモから接触条件付きの操作性進化を学習し、それを強化学習のガイドとして用いることで、異なるロボットハンドでの物体回転スキル獲得を可能にするフレームワークを提案した。
- RGB-S: 画像整合型触覚サリエンシによる堅牢な器用操作触覚/操作2026/6/7
視覚が遮蔽された状況でも、触覚センサ位置を画像平面に投影し、力変調ガウス分布で空間的不確実性をモデル化して視覚特徴に統合することで、器用操作の成功率を大幅に向上させる手法を提案した。
- Real2Sim2Real触覚ポリシー学習によるブラインド器用把持触覚/把持/sim2real2026/6/1
実ロボットの触覚データをシミュレータに転写し、触覚のみで多指ハンドのブラインド把持を学習・実機展開する手法を提案。
- HT-Bench: 器用な全手触覚表現のベンチマークと学習 - 自己中心視覚との統合触覚表現学習2026/6/1
触覚センサの多様性を超え、自己中心視覚と全手触覚データを組み合わせた大規模ベンチマークHT-Benchを構築し、触覚表現学習の評価手法とHandTouchエンコーダを提案した。
- 全身移動マニピュレーションのためのスケーラブルな軌道生成マニピュレーション2026/4/1
GPU加速フレームワークAutoMoMaを提案し、移動ベースとアームの運動学を統合したAKRモデリングと並列軌道最適化により、多様な環境・ロボットでの大規模な物理的に有効な軌道データを高速生成する。
- シーングラフ上の探索と逐次マニピュレーションを統合したLLMベース状況再計画マニピュレーション2026/2/1
未知環境でロボットが探索と逐次操作計画を統合するため、シーングラフ上でグラフ編集操作により行動列を生成し、LLMで状況に応じて再計画するフレームワークEPoGを提案。家庭環境タスクで91.3%の成功率を達成。
- TaF-VLA: 力に基づくマニピュレーションのための触覚-力アラインメントVLAモデルVLA2026/1/1
触覚入力を視覚的テクスチャではなく物理的な接触力に結びつけるTaF-Adapterを提案し、1000万件超の触覚-力同期データセットで学習してVLAモデルに統合した。
- ロボットとシーンの運動学を統合した逐次移動マニピュレーション計画移動マニピュレーション2025/8/1
環境構造を運動学モデルとして取り込み、ロボットとシーンの統合配置空間で計画することで、関節物体を含む長期的な移動マニピュレーションを実現する枠組みを提案した。
- 物理制約下で人間の価値観に沿う対話型ロボットVLA2025/8/1
LLMを搭載したロボットが、家庭内タスクを人間の好みと物理的制約の両方を考慮して実行できるよう、人間のフィードバックからの文脈内学習(ICLHF)フレームワークを提案し、ベンチマークで有効性を示した。
- SuperMag: 視覚ベース触覚データを用いた磁気触覚センサの高解像度形状再構成触覚2025/7/1
磁気触覚センサの低解像度問題を、視覚ベース触覚センサの高解像度データで教師あり学習し、条件付きVAEで高解像度形状を推定する手法を提案。
- IKDiffuser: 運動学的木構造のための拡散生成モデルによる逆運動学ソルバ逆運動学2025/6/1
エンドエフェクタ姿勢をトークン列として扱う条件付き拡散モデルにより、任意の運動学的木構造に対する逆運動学を学習・推論する汎用ソルバを提案した。
- PP-Tac: 触覚フィードバックを用いた巧みなロボットハンドによる紙つかみ触覚2025/4/1
高解像度触覚センサを備えた多指ロボットハンドで、紙のような薄くて柔らかい物体を把持するシステムを開発し、87.5%の成功率を達成した。
- モジュール型再構成可能UAVの飛行構造最適化群制御2024/7/1
重さや慣性が異なるモジュール型ドローンの群れを、遺伝的アルゴリズムで過駆動な飛行構造に再構成し、軌道追従精度を保ちつつ計算コストを削減した。
- 動的環境における逐次全身移動マニピュレーションのための統合プランニング移動マニピュレーション2024/5/1
移動マニピュレータが動的環境で逐次タスクをこなすため、長期影響を考慮したオンラインタスク計画とVKCベースの全身動作計画、MPCによる障害物回避を統合したフレームワークを提案し、実機実験で有効性を示した。
- GPT-4Vを用いた閉ループ型オープンボキャブラリ移動マニピュレーションVLA2024/4/1
GPT-4Vを活用し、未知環境での物体探索と操作を閉ループで行うロボットシステムを提案。実世界の8タスクで成功率を約35%向上させた。
- LLM³: 動作失敗の推論を組み込んだ大規模言語モデルベースのタスク・動作計画マニピュレーション2024/3/1
大規模言語モデルを使ってタスク計画と動作計画を橋渡しし、動作計画の失敗フィードバックをプロンプトで与えて提案を反復改善する、ドメイン非依存のTAMPフレームワークを提案した。
- ヘルスケア支援ロボットが自ら支援のタイミングを判断する「自律的支援チャレンジ」ヘルスケアロボット2023/11/1
ヘルスケアロボットが人間の指示なしに支援の必要性を判断し、計画・実行・フィードバックまでを自律的に行うための大規模データセットと課題を提案し、学習不要で支援ループを閉じる手法Helpyを示した。
- パーツレベルシーン再構成によるロボットインタラクションの実現シーン再構成2023/7/1
物体をプリミティブ形状でパーツ単位に再構成し、関節関係を推定することで、ロボットが操作可能なインタラクティブシーンを高精度に再現する手法を提案した。
- 過剰駆動型無人航空マニピュレータの逐次マニピュレーション計画マニピュレーション2023/6/1
過剰駆動型無人航空マニピュレータ(UAM)の逐次マニピュレーション計画問題に取り組み、仮想運動連鎖(VKC)ベースの計画と階層制御により、シミュレーションと実験で新たな逐次操作能力を実現した。
- 人間とロボットの共活動のための屋内家具配置最適化シーン再配置2023/3/1
SUNCGとConceptNetから抽出した空間的・意味的共起関係を利用し、人間の活動を損なわずにロボットの可動空間と到達可能物体を増やす家具配置を最適化するフレームワークを提案した。
- 物理・仮想把持を再現する再構成可能データグローブ触覚2023/1/1
触覚センシング・VR・FEMシミュレーションの3モードで手指の把持動作をリアルタイムに再現する再構成可能なデータグローブを開発した。
- シーングラフ上の逐次マニピュレーション計画マニピュレーション2022/7/1
接触グラフ+という3Dシーングラフ表現を提案し、グラフ編集距離と遺伝的アルゴリズムを用いて複雑な物体再配置タスクの逐次計画を実現した。
- 物理効果の理解による効果的な道具使用マニピュレーション2022/6/1
FEMシミュレータと記号回帰を用いて道具使用の物理特性を抽出し、最適制御で効率的な動作計画を生成するフレームワークを提案。
- 移動マニピュレーションのための効率的タスク計画:仮想運動連鎖の視点タスク計画2021/8/1
移動ベース・アーム・対象物の運動学を仮想運動連鎖として統合し、抽象行動の定義と不要な述語の削減によりタスク計画の探索空間と分岐を大幅に縮小する手法を提案した。
- 移動マニピュレーションのための運動学モデル統合による協調動作生成移動マニピュレーション2021/8/1
移動台車・アーム・対象物体の運動学を仮想キネマティックチェーンとして統合し、軌道最適化で協調的な移動マニピュレーション計画を実現した研究。
- 微分可能なフォースクロージャ推定器による任意のハンド構造での多様かつ物理的に安定な把持の合成把持生成2021/4/1
フォースクロージャを高速に微分可能な形で推定する手法を提案し、訓練データなしで任意のハンド構造に対し多様で物理的に安定な把持を合成できるようにした。
- パノプティックマッピングとCADモデル整合によるインタラクティブ3Dシーン再構成3Dシーン再構成2021/3/1
RGB-Dデータから物体の意味・形状と物理的常識を統合し、パーツ単位の関節付きCADモデルで置き換えることで、ロボットが操作可能なインタラクティブ3Dシーンを自動構築する手法を提案した。
