日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

触覚arXiv:2511.03733

HACI:視覚障害を持つプログラミング初学者の教育成果を向上させる触覚・音声コードインターフェース

HACI: A Haptic-Audio Code Interface to Improve Educational Outcomes for Visually Impaired Introductory Programming Students

シェア:XThreadsFacebookLINEはてブBluesky

視覚障害のある学生向けに、触覚と音声フィードバックを組み合わせてJavaScriptのコード開発・実行・デバッグを支援する教育ツールHACIを開発し、予備評価を行った論文。

詳しい要約

1. どんなもの?

- 視覚障害(VI)学生向けのプログラミング教育ツール **HACI (Haptic-Audio Code Interface)** を提案する論文 - JavaScript のプログラム開発・実行・デバッグを支援する非リソース集約型の Web application - 6 個の haptic motor を組み込んだ Arduino 製 glove とケーブル接続し、触覚フィードバックを提供 - 視覚的手がかりの欠如を haptic と audio のフィードバックで補償することを狙う - 非視覚的な code navigation、comprehension、summarizing、editing、debugging の改善と cognitive load の最小化を目的とする

2. 先行研究と比べてどこがすごい?

- 要旨からは不明(先行研究との具体的比較は記述されていない) - 視覚障害学生に STEM 教育における equitable な機会を提供する必要性を動機としている - haptic と audio を組み合わせた code interface を教育ツールとして統合した点を貢献として主張 - 既存手法との差分や優位性の定量的比較は要旨には示されていない

3. 技術・手法の肝は?

- **HACI** は非リソース集約型の Web application として実装 - JavaScript の program development、execution、debugging を支援 - Arduino 搭載の glove に 6 個の haptic motor を統合し、ケーブル経由で Web application と接続 - 視覚情報の代わりに haptic と audio の interleaved なフィードバックを提示 - 設計原則(design principles)と技術実装(technical implementation)の詳細を記述 - cognitive load の最小化を設計上の狙いとする

4. どうやって有効だと検証した?

- 学部の Computer Science 学生を対象とした **pilot study** による予備的評価を実施 - 結果として、HACI が programming constructs の非視覚的な navigation と理解を支援することを示唆 - 一方で feedback mechanism の consistency と reliability の改善が課題として残る - より機能豊富でカスタマイズ可能な accessible learning experience の必要性も指摘 - 被験者数や評価指標の詳細は要旨からは不明

5. 議論はある?

- feedback mechanism の consistency と reliability の精緻化が課題として議論されている - 現行機能を補完し、より feature-rich で customizable な accessible learning experience の必要性を指摘 - 視覚障害学生が interleaved な haptic と audio フィードバックを十分に活用できるようにする必要性 - haptic と audio フィードバックが視覚障害者向け教育実践にもつ変革的可能性を強調 - accessible programming education における今後の研究開発の基盤を築くものと位置づけ - 具体的な限界や反証的知見の詳細は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない - 関連手法として、視覚障害者向けの **screen reader** や **audio-based programming environment** など同分野の定番技術 - 触覚提示を用いる **haptic feedback** 研究や **Arduino** を用いたウェアラブル提示の関連研究 - accessible STEM education における **multimodal feedback**(haptic と audio の統合)に関する研究 - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Pratham Gandhi

分類: cs.HC, cs.RO

原文アブストラクト

This thesis introduces the Haptic-Audio Code Interface (HACI), an educational tool designed to enhance programming education for visually impaired (VI) students by integrating haptic and audio feedback to compensate for the absence of visual cues. HACI consists of a non-resource-intensive web application supporting JavaScript program development, execution, and debugging, connected via a cable to an Arduino-powered glove with six integrated haptic motors to provide physical feedback to VI programmers. Motivated by the need to provide equitable educational opportunities in computer science, HACI aims to improve non-visual code navigation, comprehension, summarizing, editing, and debugging for students with visual impairments while minimizing cognitive load. This work details HACI's design principles, technical implementation, and a preliminary evaluation through a pilot study conducted with undergraduate Computer Science students. Findings indicate that HACI aids in the non-visual navigation and understanding of programming constructs, although challenges remain in refining feedback mechanisms to ensure consistency and reliability, as well as supplementing the current functionality with a more feature-reach and customizable accessible learning experience which will allow visually impaired students to fully utilize interleaved haptic and audio feedback. The study underscores the transformative potential of haptic and audio feedback in educational practices for the visually impaired, setting a foundation for future research and development in accessible programming education. This thesis contributes to the field of accessible technology by demonstrating how tactile and auditory feedback can be effectively integrated into educational tools, thereby broadening accessibility in STEM education.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3Google DeepMind、ロボット向けAIを発表新製品・発表
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI