日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2610.24235

接触を考慮した適応インピーダンス制御のためのマルチモーダル相互作用推定

Multimodal Interaction Estimation for Contact-Aware Adaptive Impedance Control

シェア:XThreadsFacebookLINEはてブBluesky

力履歴と3D点群をTransformerで融合し、未知の負荷と人間の接触を区別して適応制御と反応制御を切り替える枠組みを提案。片腕操作や両腕での未知質量の箱持ち上げなどで汎化性を実証した。

詳しい要約

1. どんなもの?

- 人間中心環境で稼働するロボット向けの、接触を考慮した適応的impedance制御フレームワーク - 力履歴と3D point cloudをtransformer-based classifierで融合し、interaction typeを推定 - 推定結果に基づき、未知payloadの選択的補償(system identification)と、adaptive/reactiveモードを切り替えるvariable-impedance制御を実行 - 同時にinteraction forceを推定し、human intent estimationなどの下流タスクに供する task-agnosticな設計を掲げる

2. 先行研究と比べてどこがすごい?

- 単一sensing modalityの限界を指摘: 力信号はpayloadとhuman pushを分離できず、visionはocclusionに弱い - 先行研究との具体的比較は要旨からは不明 - 提案の特徴は、force historyと3D point cloudのfusionによりinteraction typeを判別する点 - modality dropoutでocclusion耐性を訓練し、simulationからhardwareへfine-tuneする点

3. 技術・手法の肝は?

- transformer-based classifierでforce historyと3D point cloudを融合しinteractionを推定 - modality dropoutを訓練に用いocclusion resilienceを確保 - simulationからhardwareへfine-tune - classifierがsystem identificationを駆動し、未知payloadを選択的に補償 - variable-impedance controllerがadaptiveモードとreactiveモードを切替 - interaction forceを同時推定し、human intent estimation等へ供給

4. どうやって有効だと検証した?

- 外部perturbationと未知loadの下で検証 - 単腕manipulation、imitation-learning-based policyでのdeployment、intent-driven target switchingを実施 - 2台のFranka armsで未知質量の箱を持ち上げるzero-shot bimanual deploymentを実施 - closed kinematic chainsやunseen setupsへのgeneralizationを示す - classifierは91.89% accuracy、片modality完全occlusion下でも90%超を維持

5. 議論はある?

- 単一modalityではpayloadとhuman pushの分離やocclusion対応が困難という課題意識 - modality dropoutによるocclusion耐性と、sim-to-hardware fine-tuneの有効性を示唆 - closed kinematic chainsやunseen setupsへのgeneralizationに言及 - 限界や失敗事例、計算コスト等の詳細は要旨からは不明

6. 次に読むべき論文は?

- transformer-based classifierによるmultimodal fusion(force history + 3D point cloud)の関連研究 - modality dropoutを用いたocclusion resilienceの研究 - system identificationによるpayload compensationの研究 - variable-impedance control / adaptive impedance controlの研究 - imitation-learning-based policyのdeployment研究 - Franka armsを用いたbimanual manipulation研究 - 要旨で参照/比較されている個別論文は不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Mateusz Jaszczuk, Paris Perdikaris, Nadia Figueroa

分類: cs.RO

原文アブストラクト

With advancements in learning-based policies, robots are increasingly being deployed in human-centric environments, such as manufacturing floors and homes, where safe and precise operation requires compensating for unknown loads while remaining compliant during human interactions. Reliably distinguishing between these interaction types is challenging with a single sensing modality, as force signals cannot separate payloads from human pushes, and vision is susceptible to occlusions. We propose a task-agnostic interaction estimation and adaptive control framework that addresses this challenge by fusing force history and 3D point cloud through a transformer-based classifier. Trained with modality dropout for occlusion resilience and fine-tuned from simulation to hardware, the classifier achieves 91.89% accuracy and maintains above 90% under complete occlusion of one modality. The classifier drives a system identification framework that selectively compensates for unknown payloads and a variable-impedance controller that switches between adaptive and reactive modes, while simultaneously estimating interaction forces for downstream tasks, such as human intent estimation. We validate the framework under external perturbations and unknown loads across single-arm manipulation, deployment with an imitation-learning-based policy, intent-driven target switching, and zero-shot bimanual deployment on two Franka arms lifting a box of unknown mass, demonstrating generalization to closed kinematic chains and unseen setups, enabling safe and precise deployment.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI