日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

触覚arXiv:2505.20498

ControlTac: 単一参照画像による力と位置を制御した触覚データ拡張

ControlTac: Force- and Position-Controlled Tactile Data Augmentation with a Single Reference Image

シェア:XThreadsFacebookLINEはてブBluesky

単一の参照触覚画像と接触力・接触位置を条件として、物理的に妥当な触覚画像を生成する2段階の制御可能なフレームワークを提案し、触覚データセットの拡張に有効であることを示した。

詳しい要約

1. どんなもの?

- ControlTacは、単一のreference tactile imageとcontact force・contact positionを条件として、リアルなtactile imageを生成する2段階のcontrollable framework。 - Vision-based tactile sensing向けのtactile data augmentationを目的とする。 - 生成画像を下流タスクのデータ拡張に用いる。

2. 先行研究と比べてどこがすごい?

- 大規模tactile data収集は、sensor-object interactionの局所性やsensor instance間の不整合のため高コスト。 - 既存のsimulationやfree-form tactile generationによるデータ拡張は、非現実的な出力や下流タスクへのtransferabilityの低さに悩む。 - ControlTacは物理priorを制御入力に用い、物理的に妥当で多様なtactile imageを生成できる点が異なる。

3. 技術・手法の肝は?

- 単一のreference tactile image、contact force、contact positionを条件とする2段階のcontrollable framework。 - これらの物理priorを制御入力としてtactile imageを生成する。 - 詳細なnetwork構成や学習手順は要旨からは不明。

4. どうやって有効だと検証した?

- 3つの下流タスクの実験で、ControlTacによるtactile datasetのaugmentationが一貫した性能向上をもたらすことを示した。 - 3つのreal-world experimentで実用性も検証した。 - 各タスク・実験の具体的内容は要旨からは不明。

5. 議論はある?

- 既存手法の非現実的な出力とtransferabilityの低さを課題として挙げ、物理prior制御で対処する立場。 - 限界や失敗ケース、sensor instance間の不整合への対応については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で比較対象として言及されるsimulationベースのtactile data生成およびfree-form tactile generationの関連研究。 - Vision-based tactile sensingのperception・reconstruction・robotic manipulationに関する研究。 - 個別の論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Dongyu Luo, Kelin Yu, Amir-Hossein Shahidzadeh, Cornelia Fermüller, Yiannis Aloimonos, Ruohan Gao

分類: cs.CV, cs.LG, cs.RO

原文アブストラクト

Vision-based tactile sensing has been widely used in perception, reconstruction, and robotic manipulation. However, collecting large-scale tactile data remains costly due to the localized nature of sensor-object interactions and inconsistencies across sensor instances. Existing approaches to scaling tactile data, such as simulation and free-form tactile generation, often suffer from unrealistic output and poor transferability to downstream tasks. To address this, we propose ControlTac, a two-stage controllable framework that generates realistic tactile images conditioned on a single reference tactile image, contact force, and contact position. With those physical priors as control input, ControlTac generates physically plausible and varied tactile images that can be used for effective data augmentation. Through experiments on three downstream tasks, we demonstrate that ControlTac can effectively augment tactile datasets and lead to consistent gains. Our three real-world experiments further validate the practical utility of our approach. Project page: https://dongyuluo.github.io/controltac.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI