Wenzhen Yuan
収録論文 54本 ・ フィジカルAI/ロボット学習
※arXiv著者名で収集。同姓同名の別人の論文が含まれる場合があります。
論文
- 仮想現実における人間-ロボット相互作用のためのマルチモーダル社会的認識フレームワークHRI2026/10/25
音声・視覚・触覚を統合してロボットの発話と動作を生成するフレームワークをVR上で18人により評価し、自律システムは人間遠隔操作に及ばないものの自然さと社会適切性で中間点を上回った。
- FORCA:接触を伴うロボットマニピュレーションのための力覚対応コーディングエージェントマニピュレーション2026/10/22
視覚と手首の力覚センサ情報を入力に、接触を伴う作業用のPythonプログラムを生成・修正するコーディングエージェントFORCAを提案。実機5タスクで精度向上や表面変化への適応、接触調整の有効性を示した。
- 触覚によるロボットマニピュレーション:力学駆動からデータ駆動への展望触覚2026/10/21
触覚を用いたロボットマニピュレーション研究を、接触力学に基づく力学駆動型と学習に基づくデータ駆動型の二つの視点から整理し、模倣学習・強化学習・VLA・予測モデルなどの最近の進展と今後の課題を展望したレビュー論文。
- ContactBench 1.0:日常的な接触を伴うロボットマニピュレーションのベンチマーク接触を伴うマニピュレーション2026/10/17
日常的な接触を伴う操作スキルを8カテゴリ・36タスク・40以上の物体アセットで再現可能に評価するベンチマークを提案し、視覚のみ・視覚触覚ポリシーの性能を比較した。
- 仮想ヒューマンロボットインタラクションによる全身社会的触覚センシングの要求駆動設計触覚2026/7/1
社会的物理的ヒューマンロボットインタラクションのための触覚センシングを、ハードウェア駆動ではなく相互作用データから要求を導出する枠組みを提案。VRプラットフォームで全身接触分布を収集し、9つの社会的タッチジェスチャを特定、18名の参加者から5,520試行のデータセットを構築した。
- 食品切断のための知覚-操作ロボットシステムマニピュレーション2026/7/1
食品の特性に応じて適切な包丁を選択し、強化学習で切断速度とエネルギー効率を最適化するロボットシステムを提案。未見の食品に対する包丁選択成功率は100%で、人間と同等の性能を示した。
- LUCID: 非構造化人間ビデオからの身体非依存意図モデル学習による拡張可能な器用なロボット技能獲得模倣学習/ロボット技能獲得2026/6/10
インターネット規模の非構造化人間ビデオからタスク意図を学習し、並列シミュレーションでロボット制御を学習する2段階フレームワークを提案。意図モデルは身体非依存で、異なるロボット形態に適用可能。
- TouchAnything: 拡散モデルによるスパースなロボット触覚からの3次元再構成触覚/3次元再構成2026/4/1
少数の触覚センサ情報と物体の大まかなクラス情報から、事前学習済みの2次元拡散モデルを幾何学的先行知識として活用し、物体の正確な3次元形状を再構成するフレームワークを提案した。
- 機能ベースのパラメトリック協調設計最適化による器用なロボットハンドの設計マニピュレーション2026/4/1
ロボットハンドの設計をタスク駆動の評価や制御と統合し、掌構造・指の運動学・指先形状・表面曲率を統一したパラメトリックフレームワークを提案し、把持安定性の最適化で検証した。
- GelSphere: 全方位転がり式ビジョン触覚センサによるオンライン3次元再構成と垂直力推定触覚2026/3/1
全方位に転がる球状のビジョン触覚センサを開発し、表面を連続走査しながら3次元再構成と垂直力推定を実現した。
- 把持から動作へ:動的環境における道具使用のための巧みな把持マニピュレーション2026/2/1
物理ベースの把持最適化と強化学習による把持適応を組み合わせ、動的な道具使用タスクでも安定した把持を維持するシステムを提案。16自由度の巧みなハンドでシミュレーションから実機へのゼロショット転移を実現した。
- FruitTouch:優しくスケーラブルな果実収穫のための知覚型グリッパ触覚2026/2/1
高解像度の視覚ベース触覚センシングを統合したコンパクトなグリッパを提案し、果実の把持安定性と損傷防止を実現した。
- PALM: アフォーダンス推論と進捗認識による長期的ロボットマニピュレーションのためのポリシー学習VLA2026/1/1
視覚言語行動モデルにアフォーダンス推論とサブタスク進捗予測を組み込み、長期的な多段階ロボット操作の成功率と汎化性能を大幅に向上させた研究。
- 触覚による人間の意図認識を用いたロボット支援ナビゲーション触覚2025/9/1
移動支援ロボットの操作インターフェースとして、円筒型触覚センサとその形状を考慮したSVM(CK-SVM)を開発し、人間のナビゲーション意図を高精度で認識できることを示した。
- PneuGelSight:柔軟ロボットのための視覚ベース固有感覚・触覚センシング触覚2025/8/1
柔軟空気圧マニピュレータにカメラを内蔵し、高解像度の固有感覚と触覚を視覚的に取得する手法を提案。シミュレーションから実機へのゼロショット転移を可能にするパイプラインも構築した。
- GelSLAM:リアルタイム・高忠実・堅牢な3D触覚SLAMシステム触覚2025/8/1
触覚のみを用いて物体の姿勢を長時間推定し、形状を高忠実に再構成するリアルタイム3D SLAMシステムを提案。表面法線と曲率を利用した追跡とループ閉じ込みにより、低テクスチャ物体でもサブミリ精度を実現。
- 触覚ロボティクス:展望触覚2025/8/1
触覚センシング技術の現状と課題を整理し、製造・医療・リサイクル・農業などへの応用に向けた今後の方向性を展望した論文。
- DoorBot: 触覚フィードバックを用いた実環境でのドア開けのための閉ループタスク計画と操作マニピュレーション2025/4/1
触覚フィードバックを活用した閉ループ階層制御により、未知の多様なドアを実環境で開けるロボットシステムを提案し、20種類の未知ドアで90%の成功率を達成した。
- GelSight触覚センサのモジュール設計最適化フレームワーク触覚2025/4/1
GelSight型視覚触覚センサの光学設計をモジュール化・パラメータ化し、物理シミュレーションに基づく目的関数で最適化するツールボックスを提案。非専門家でも迅速に設計を最適化できる。
- ヒューマノイドロボットの布ベース触覚センシングによる社会的ジェスチャー認識触覚2025/3/1
ヒューマノイドロボットの腕に布ベースの大規模触覚センサを取り付け、複数参加者の社会的触覚ジェスチャーを認識するシステムを構築した。
- 不確かさを手がかりに重心を探る:任意物体の重心推定のための能動知覚手法触覚2025/2/1
ベイズニューラルネットで不確かさを定量化し、触覚を伴う複数回の情報量の多い把持・回転操作を能動的に選ぶことで、未知の実物体の重心を高精度に推定する枠組みを提案した。
- センサ非依存の触覚表現触覚2025/2/1
光学式触覚センサ間でゼロショット転移を可能にするセンサ非依存の触覚表現を提案し、シミュレーションで学習して実世界の新センサに汎化できることを示した。
- GelBelt:大面積を持続的にセンシングする視覚ベース触覚センサ触覚2025/1/1
エラストマーベルトと2つの車輪で対象表面を連続走査し、大規模表面の形状復元と欠陥検出を高精度・高速(最大45mm/s)で行える視覚ベース触覚センサを提案した。
- NormalFlow: 視覚触覚センサによる高速・頑健・高精度な接触ベース物体6DoF姿勢追跡触覚2024/12/1
視覚触覚センサが推定する表面法線のずれを最小化することで、物体の6DoF運動をリアルタイムに追跡する手法を提案し、低テクスチャ物体や長時間の回転追跡、3D再構成で高精度を示した。
- FusionSense: 常識・視覚・触覚を融合したロバストな疎視点再構成触覚2024/10/1
基盤モデルの事前知識と視覚・触覚の疎な観測を統合し、透明・反射・暗色物体でも高精度に3D再構成するフレームワークを提案。
- 知覚的なパンケーキ生地の撹拌と精密注ぎのための知能ロボットシステムマニピュレーション2024/7/1
触覚センシングと制御アルゴリズムを統合し、生地の均一性を自律的に達成しつつ、水分粉比率や液面を推定し、複雑な形状に精密に注ぐロボットシステムを開発した。
- スケーラブルなシミュレーション誘導型柔軟触覚フィンガー設計触覚2024/3/1
GelSight Fin Rayセンサの設計を高速化するため、有限要素法と物理ベースレンダリングを組み合わせたシミュレーションフレームワークを提案し、ゲルパッド形状や照明条件などの設計選択を調査した。
- キッチンアーティスト:グルメプレーティングのための液体ディスペンシングの精密制御マニピュレーション2023/11/1
ソースの盛り付けロボットを実現するため、力センサで液体の特性を推定し、データ駆動で線の太さを制御するオープンループシステムを開発した。
- 視覚と触覚を併用した大規模部品のロボット欠陥検査触覚2023/9/1
視覚で欠陥候補を絞り込み、触覚で局所走査して確認する2段階のマルチモーダル検査手法を提案し、航空宇宙部品の実データで評価した。
- 産業用ロボット向けテキスタイル触覚スキンのカスタマイズ触覚2023/8/1
布製の触覚スキンを産業用ロボットアームに迅速に作製・校正・実装する手法を提案し、接触位置と力を高精度に計測できることを示した。
- 触覚センシングによる容器内固体粒子の特性推定触覚2023/7/1
触覚センサを用いて容器を操作し、中の粉体・粒状物の質量・体積・粒径・形状を推定する手法を提案。
- 空気圧ソフトロボットの3D固有感覚センシングに向けたゼロショットSim-to-Real転移学習sim2real2023/3/1
空気圧ソフトロボットの全形状を内蔵カメラで推定するため、高忠実度点群を生成するシミュレーション環境を構築し、実機へのゼロショット転移を実現した研究。
- RobotSweater: ロボット向けの拡張可能で汎用性が高くカスタマイズ可能な機械編み触覚スキン触覚2023/3/1
機械編みで作製した多層の感圧触覚スキンをロボットに適用し、接触検出・多点位置推定・圧力計測を実現するとともに、ロボットアームの教示制御と移動ロボットとのインタラクションに応用した。
- 触覚駆動型動作プリミティブによるケーブルの配線と組立マニピュレーション2023/3/1
指先のGelSightセンサを用いた触覚誘導動作プリミティブを構築し、視覚によるタスク解析と統合することで、ケーブルの配線・組立を実現した。触覚なしの手法より大幅に優れる。
- PoseIt: 把持姿勢と把持安定性を解析する視覚・触覚データセットマニピュレーション2022/9/1
物体を把持して腕を再配置した後の安定性を調べるため、視覚と触覚のマルチモーダルデータセットPoseItを構築し、把持安定性を予測するLSTM分類器を訓練した。
- 触覚センシングにおけるSim-to-Real転移を用いた把持安定性予測触覚2022/8/1
接触物理モデルと視覚ベース触覚センサのシミュレーションを統合し、実世界データでキャリブレーションすることで、ゼロショットのSim-to-Real把持安定性予測を平均精度90.7%で実現した。
- 液体の性質推定に向けた動的触覚センシングの理解触覚2022/5/1
ボトルを揺らした際の液体の振動をGelSightで捉え、物理に着想を得た軽量モデルとガウス過程回帰で液体の粘度や量、糖濃度を推定する手法を提案した。
- ObjectFolder 2.0:Sim2Real転送のためのマルチセンサリ物体データセットsim2real2022/4/1
視覚・音響・触覚のマルチセンサリデータを持つ大規模物体データセットを構築し、仮想物体で学習したモデルが実世界の物体スケール推定・接触位置推定・形状復元に転送できることを示した。
- 視覚・触覚センサの同位置配置によるビジュアルサーボと位置推定触覚2022/4/1
カメラと触覚センサを同位置に配置し、接触前の視覚情報と接触後の触覚情報を統合することで、物体の位置・姿勢推定とロボットのビジュアルサーボ精度を向上させる手法を提案した論文。
- ShapeMap 3-D:触覚と視覚の融合による効率的な形状マッピング触覚2021/9/1
GelSight触覚センサと深度カメラを用い、ガウス過程に基づく空間ファクタグラフで物体の暗黙的表面表現を逐次構築する視触覚マッピング手法を提案した論文。
- Taxim: GelSight触覚センサのための例ベースシミュレーションモデル触覚2021/9/1
GelSight触覚センサの光学応答とマーカー移動を例ベースのルックアップテーブルと弾性変形理論で高速にシミュレーションするモデルを提案し、実センサの少数データで校正可能にした。
- 触覚センシングによる回転計測で把持安定性を向上させる手法触覚2021/8/1
GelSight触覚センサで物体の回転変位を検出し、把持失敗を早期に発見して安定な把持姿勢へ再把持する閉ループ系を提案した論文。
- 変形物体マニピュレーションの課題と展望変形物体操作2021/5/1
変形物体操作(DOM)の研究動向をハードウェア・センシング・モデリング・計画・制御の各側面から概観し、主要な課題と今後の研究方向を整理したサーベイ論文。
- 物理ベースレンダリングによる視覚型触覚センサのシミュレーション触覚2020/12/1
GelSightセンサ向けに物理ベースレンダリングを用いた光学触覚シミュレーションシステムを構築し、従来手法より高精度な画像類似度を実現した。
- 階層制御による堅牢な把持内操作の学習マニピュレーション2019/10/1
低レベルにモデルベース制御、中レベルに学習ポリシーを置く階層手法で、指先での物体の持ち替えやスライド・反転を堅牢に実行できることを示した。
- 触覚テクスチャ生成のための動作条件付きモデルの学習触覚2019/9/1
視覚触覚センサとユーザ動作を入力に、素材ごとに別モデルを必要とせず全素材を統合した動作条件付きモデルで触覚振動フィードバック用の加速度を予測する手法を提案した。
- 深層視覚センシングによるソフトボディのリアルタイム3D固有感覚触覚2019/4/1
内部カメラとCNNを用いてソフトボディの高解像度3D形状をリアルタイム(2.5ms/フレーム以下)で推定するフレームワークを提案し、高い精度(相対誤差1%以下)を実現した。
- 単眼視・触覚・形状事前知識を統合した3D形状知覚触覚2018/8/1
単眼カラー画像から学習済み形状事前知識を用いて3D形状を予測し、不確実性の高い領域を触覚で能動的に補正することで、約10回の触探索で高精度な物体形状を復元する手法を提案した。
- 感覚だけじゃない:視覚と触覚で学ぶ把持と再把持マニピュレーション2018/5/1
視覚と触覚の生データから把持調整の結果を予測し、効率的に把持を繰り返し調整する深層マルチモーダルモデルを提案した論文。
- ViTac: 視覚と触覚の特徴共有による布地テクスチャ認識触覚2018/2/1
視覚画像とGelSight触覚画像から布地のテクスチャを認識するため、深層特徴を最大共分散分析で対応付けて共有潜在空間を学習するDMCA融合手法を提案し、90%超の認識性能を達成した。
- 触覚センシングと深層学習による衣服素材の能動的知覚触覚2017/11/1
Kinectで誘導したロボットがGelSight触覚センサで衣服を把持し、CNNで厚さや柔らかさなど11の素材特性を認識する能動的触覚知覚システムを構築した。
- 触覚は把持成功を予測できるか:視覚と触覚のマルチモーダル学習による検証触覚2017/10/1
GelSight触覚センサ付き2本指グリッパで9,000回以上の把持試行を収集し、視覚・触覚を組み合わせた深層学習モデルで把持成功を予測、触覚情報の追加が予測精度を大きく向上させることを示した。
- 幾何形状と滑りを高精度に計測する改良型GelSight触覚センサ触覚2017/8/1
ランバート膜と新しい照明系を採用したGelSight触覚センサを開発し、形状計測精度を大幅に向上させるとともに、膜表面の相対運動とせん断歪みを組み合わせて並進・回転滑りを検出できることを示した。
- GelSight触覚センサと深層学習による形状非依存の硬さ推定触覚2017/4/1
GelSight触覚センサの高解像度接触画像を深層ニューラルネットで解析し、接触条件や物体形状を厳密に制御せずとも硬さを推定できる手法を提案した。
