論文
フィジカルAI関連の最新論文を、日本語のひとことで。原題は英語です。
最新論文: 2024/12/1 / arXivを3時間ごとに自動収集
📖 UMIデバイス・カタログ(日本語版)UMI式データ収集デバイスと主要データセットを日本語で俯瞰 →- 論文マニピュレーションロボティクス
Multi-GraspLLM:多様なロボットハンドのための意味誘導型把持生成マルチモーダルLLM
自然言語指示に基づき、複数のロボットハンドに対応した把持姿勢を生成する統合フレームワークを提案し、接触注釈付き大規模データセットMulti-GraspSetを構築した。
原題: Multi-GraspLLM: A Multimodal LLM for Multi-Hand Semantic Guided Grasp Generation / Haosheng Li, Weixin Mao, Weipeng Deng 他
日本語で読む → - 論文マニピュレーションロボティクス
欲しいものを掴む:音声で駆動する身体性を備えた巧みな把持システム
音声指示と視覚情報を視覚言語モデルで統合し、雑然とした環境でも対象物体を正確に把持する身体性把持システム(EDGS)を提案。人間の手と物体の相互作用に着想を得た把持戦略で高い成功率を実現した。
原題: Grasp What You Want: Embodied Dexterous Grasping System Driven by Your Voice / Junliang Li, Kai Ye, Haolan Kang 他
日本語で読む → - 論文マニピュレーションロボティクス
SparseGrasp: 疎な多視点RGB画像からの3Dセマンティックガウシアンスプラッティングによるロボット把持
疎な多視点RGB画像から3Dガウシアンスプラッティングと視覚基盤モデルを組み合わせて意味情報付きシーンを構築し、変化する環境でも高速に更新しながら言語指示で物体を把持するシステムを提案した。
原題: SparseGrasp: Robotic Grasping via 3D Semantic Gaussian Splatting from Sparse Multi-View RGB Images / Junqiu Yu, Xinlin Ren, Yongchong Gu 他
日本語で読む → - 論文マニピュレーションロボティクス
マッサージ技法のデジタルモデリングとロボットアームによる再現
中国伝統医学のマッサージ技法を運動学・動力学の観点から解析し、適応アドミタンス制御を用いたロボットアームでその力と位置を再現した研究。
原題: Digital Modeling of Massage Techniques and Reproduction by Robotic Arms / Yuan Xu, Kui Huang, Weichao Guo 他
日本語で読む → - 論文マニピュレーションロボティクス
ManiSkill-HAB:家庭内整理タスクにおける低レベル操作のベンチマーク
家庭内の物体整理タスク向けに、GPU高速化した低レベル操作ベンチマークMS-HABを構築し、強化学習・模倣学習のベースラインと安全基準に基づくデモンストレーションフィルタリングを提供した。
原題: ManiSkill-HAB: A Benchmark for Low-Level Manipulation in Home Rearrangement Tasks / Arth Shukla, Stone Tao, Hao Su
日本語で読む → - 論文マニピュレーションロボティクス
Spline-FRIDA:多様で人間らしい筆致を実現するサンプル効率の良い微分可能筆ストロークモデル
モーションキャプチャで人間の筆致を記録し、オートエンコーダと新たなストローク動力学モデルでロボット描画プラットフォームFRIDAを拡張、より人間らしく芸術的な筆致を生成できるようにした。
原題: Spline-FRIDA: Towards Diverse, Humanlike Robot Painting Styles with a Sample-Efficient, Differentiable Brush Stroke Model / Lawrence Chen, Peter Schaldenbrand, Tanmay Shankar 他
日本語で読む → - 論文アフォーダンス/マニピュレーションロボティクス
ManipGPT:大規模視覚モデルのアフォーダンスセグメンテーションは関節物体操作に十分か?
大規模視覚Transformerを微調整し、関節物体の操作に必要な部位レベルのアフォーダンスマスクを予測する枠組みを提案。シミュレーションと実世界の画像データセットで学習し、インピーダンス適応方策と組み合わせることで複雑な知覚システムなしに操作を実現した。
原題: ManipGPT: Is Affordance Segmentation by Large Vision Models Enough for Articulated Object Manipulation? / Taewhan Kim, Hojin Bae, Zeming Li 他
日本語で読む → - 論文マニピュレーションロボティクス
専門家の積によるサンプリングベース拘束運動計画
サンプリングベースMPCの拘束最適化において、最適性と実行可能性を別々の分布に分け、専門家の積で統合するproject-then-sample戦略を提案し、障害物回避や非把持マニピュレーションで有効性を示した。
原題: Sampling-Based Constrained Motion Planning with Products of Experts / Amirreza Razmjoo, Teng Xue, Suhan Shetty 他
日本語で読む → - 論文マニピュレーションロボティクス
関節物体操作のための半教師ありニューラルプロセス
ラベル付き操作データが少ない物体でも、大量の画像データと組み合わせて報酬を予測する半教師ありモデルを提案し、ドア開けタスクで有効性を示した。
原題: Semi-Supervised Neural Processes for Articulated Object Interactions / Emily Liu, Michael Noseworthy, Nicholas Roy
日本語で読む → - 論文マニピュレーションロボティクス
AnyBimanual:単腕ポリシーを汎用両腕マニピュレーションへ転移
事前学習済みの単腕ポリシーをスキルマネージャと視覚アライナで両腕タスクに転移し、少ない実演で汎用両腕マニピュレーションを実現する手法を提案。
原題: AnyBimanual: Transferring Unimanual Policy for General Bimanual Manipulation / Guanxing Lu, Tengbo Yu, Haoyuan Deng 他
日本語で読む → - 論文マニピュレーションロボティクス
P3-PO: ロボット方策の視覚空間汎化のための指示的点事前分布
人間が1枚のデモ画像上で指定した意味的な点を既存の視覚モデルでデータセット全体に伝播させ、その点を状態表現として方策学習に用いることで、新しい物体や混雑環境への汎化性能を大幅に向上させた研究。
原題: P3-PO: Prescriptive Point Priors for Visuo-Spatial Generalization of Robot Policies / Mara Levy, Siddhant Haldar, Lerrel Pinto 他
日本語で読む → - 論文マニピュレーションロボティクス
ロボットマニピュレーションのための報酬マシン推論
視覚的な実演から報酬マシンの構造と高レベルイベントを同時に学習し、強化学習エージェントが最適方策を獲得できる手法を提案した。
原題: Reward Machine Inference for Robotic Manipulation / Mattijs Baert, Sam Leroux, Pieter Simoens
日本語で読む → - 論文マニピュレーションロボティクス
AffordDP: 転移可能なアフォーダンスによる汎化可能な拡散ポリシー
物体の操作箇所と動作軌道を表すアフォーダンスを基礎モデルと点群位置合わせで未知物体に転移し、拡散サンプリング時の誘導に用いることで、未見カテゴリへの操作汎化を実現した。
原題: AffordDP: Generalizable Diffusion Policy with Transferable Affordance / Shijie Wu, Yihang Zhu, Yunao Huang 他
日本語で読む → - 論文マニピュレーションロボティクス
RoboMIND:ロボットマニピュレーションのためのマルチエンボディメント知能規範データセット
4種類のロボットによる10.7万件の模倣学習用デモンストレーション軌道と失敗例、デジタルツイン環境を提供する大規模データセットを構築し、VLAモデルの性能を評価した。
原題: RoboMIND: Benchmark on Multi-embodiment Intelligence Normative Data for Robot Manipulation / Kun Wu, Chengkai Hou, Jiaming Liu 他
日本語で読む → - 論文マニピュレーションロボティクス
RoboTron-Mani:ロボット操作のためのオールインワン・マルチモーダル大規模モデル
カメラパラメータと占有監督で3D知覚を強化し、モダリティ分離マスクとマルチモーダルデコーダで融合を改善したロボット操作モデルと、複数データセットを統合したRoboDataを提案。CALVINで平均系列長を1.7から3.5に向上させ、シミュレーションと実世界で最先端を達成。
原題: RoboTron-Mani: All-in-One Multimodal Large Model for Robotic Manipulation / Feng Yan, Fanfan Liu, Liming Zheng 他
日本語で読む → - 論文マニピュレーションロボティクス
視覚システムを備えた電動義手による人間らしい把持の実現
視覚情報のみから把持ジェスチャと把持意図を推定し、人間らしい把持動作を実現する電動義手の手法を提案した。
原題: A Powered Prosthetic Hand with Vision System for Enhancing the Anthropopathic Grasp / Yansong Xu, Xiaohui Wang, Junlin Li 他
日本語で読む → - 論文マニピュレーション機械学習
物体再配置のための階層的物体指向POMDPプランニング
部分観測の多部屋環境で物体を再配置するため、物体指向POMDPプランナと低レベル方策を組み合わせた階層的オンラインプランニング手法を提案し、新ベンチマークMultiRoomRで有効性を示した。
原題: Hierarchical Object-Oriented POMDP Planning for Object Rearrangement / Rajesh Mangannavar, Alan Fern, Prasad Tadepalli
日本語で読む → - 論文マニピュレーションロボティクス
並列形状マッチングによる把持
グリッパと物体の剛体形状マッチングとして把持問題を定式化し、AS-ICPとGPU並列化で高速かつロバストな把持を実現した。
原題: Grasping by parallel shape matching / Wenzheng Zhang, Fahira Afzal Maken, Tin Lai 他
日本語で読む → - 論文マニピュレーションロボティクス
逆運動学計画と制御における統合階層的意思決定
階層的意思決定と全身逆運動学計画・制御を統合する非線形計画法を提案し、L0ノルムを活用して効率的かつ汎用的に複雑な問題を解く。
原題: Integrated Hierarchical Decision-Making in Inverse Kinematic Planning and Control / Kai Pfeiffer, Quan Zhang, Yuqing Chen 他
日本語で読む → - 論文マニピュレーションロボティクス
RoboHanger: 多様な衣類へのハンガー挿入を学習する汎化可能なロボットシステム
平置きされた未知の衣類にハンガーを挿入するタスクを、サブタスク分割と低次元行動パラメータ化、シミュレータでの合成データ生成により学習し、実世界で8種類の未見衣類に対し75%の成功率を達成した。
原題: RoboHanger: Learning Generalizable Robotic Hanger Insertion for Diverse Garments / Yuxing Chen, Songlin Wei, Bowen Xiao 他
日本語で読む → - 論文マニピュレーションロボティクス
モデル予測強化学習による動的な非把持物体搬送
少数の実演データから価値関数を学習し、不確実性を考慮したMPCと組み合わせることで、ロボットがお盆に載せた物体をこぼさず運ぶ「ロボットウェイター」タスクを実現した研究。
原題: Dynamic Non-Prehensile Object Transport via Model-Predictive Reinforcement Learning / Neel Jawale, Byron Boots, Balakumar Sundaralingam 他
日本語で読む → - 論文マニピュレーションロボティクス
Grasp Diffusion Network: 部分点群からSO(3)×R3上の拡散モデルで把持姿勢を生成
単視点の部分点群から、回転多様体上の拡散モデルと衝突回避コスト誘導を用いて把持姿勢を生成し、実世界で90%の成功率を達成した。
原題: Grasp Diffusion Network: Learning Grasp Generators from Partial Point Clouds with Diffusion Models in SO(3)xR3 / Joao Carvalho, An T. Le, Philipp Jahr 他
日本語で読む → - 論文マニピュレーションロボティクス
人間らしいロボットマニピュレーションのための視覚的逆強化学習
人間の操作をRGB-Dキーポイントで観察し、逆強化学習と神経記号的動力学モデルを用いて協働ロボットに人間らしい動作を学習させる手法を提案した。
原題: Visual IRL for Human-Like Robotic Manipulation / Ehsan Asali, Prashant Doshi
日本語で読む → - 論文マニピュレーションロボティクス
密集クラッタ環境における双腕プッシュ・把持シナジーの学習
密集した clutter 環境で対象物を把持するため、視覚入力から双腕のプッシュと把持の協調動作を階層型深層強化学習で学習するフレームワークを提案。
原題: Learning Dual-Arm Push and Grasp Synergy in Dense Clutter / Yongliang Wang, Hamidreza Kasaei
日本語で読む → - 論文マニピュレーションロボティクス
触覚の暗黙的キャリブレーションによる視覚誘導型ロボットマニピュレーションの力安全性の確保
視覚と触覚を統合した状態拡散フレームワークSafeDiffを提案し、ドア開けなどの拘束環境で安全な力制御を実現する。大規模シミュレーションデータセットSafeDoorManip50kも構築した。
原題: Ensuring Force Safety in Vision-Guided Robotic Manipulation via Implicit Tactile Calibration / Lai Wei, Jiahua Ma, Yibo Hu 他
日本語で読む → - 論文マニピュレーションロボティクス
瞬時制御から予測制御へ:ロボットマニピュレータのための直感的で調整しやすいMPC定式化
ロボットマニピュレータ制御において、瞬時制御の調整しやすさを保ちつつ予測ホライズンで性能を高める実用的なMPC定式化を提案し、表面追従タスクで有効性を示した。
原題: From Instantaneous to Predictive Control: A More Intuitive and Tunable MPC Formulation for Robot Manipulators / Johan Ubbink, Ruan Viljoen, Erwin Aertbeliën 他
日本語で読む → - 論文マニピュレーション画像認識
BimArt: 関節物体に対する3D両手操作の統合生成手法
関節物体を両手で操作する3D手の動きを、参照把持や粗い軌道なしに生成する手法。接触マップを条件に多様でリアルな両手動作を合成する。
原題: BimArt: A Unified Approach for the Synthesis of 3D Bimanual Interaction with Articulated Objects / Wanyue Zhang, Rishabh Dabral, Vladislav Golyanik 他
日本語で読む → - 論文マニピュレーションロボティクス
関節物体操作のための部分空間別ハイブリッド強化学習
関節物体の操作を複数の部分空間に分割し、それぞれ独立した目的で強化学習ポリシーを学習することで、未知のダイナミクスへの適応と冗長性の活用を実現した。
原題: Subspace-wise Hybrid RL for Articulated Object Manipulation / Yujin Kim, Sol Choi, Bum-Jae You 他
日本語で読む → - 論文マニピュレーションロボティクス
RoboMD: 意味的ポテンシャル場によるロボットの脆弱性発見
視覚言語埋め込み空間をポテンシャル場として強化学習し、実機試行なしで操作ポリシーの脆弱性を予測・マッピングするフレームワークを提案。
原題: RoboMD: Uncovering Robot Vulnerabilities through Semantic Potential Fields / Som Sagar, Jiafei Duan, Sreevishakh Vasudevan 他
日本語で読む → - 論文マニピュレーションAI
EC-Diffuser: エンティティ中心の行動生成によるマルチオブジェクト操作
物体中心表現とエンティティ中心Transformer、拡散モデルを組み合わせ、オフライン画像データからマルチオブジェクト操作を学習し、未見の物体・目標の組み合わせへゼロショット汎化を実現した。
原題: EC-Diffuser: Multi-Object Manipulation via Entity-Centric Behavior Generation / Carl Qi, Dan Haramati, Tal Daniel 他
日本語で読む →
PR・アフィリエイト広告
