自閉症スペクトラム教育向けヒューマノイドロボットの視覚的タスクモデリングと自動計画
Visual Task Modeling and Automated Planning for Humanoid Robots in Education of Individuals with Autism Spectrum Disorder
靴箱タスクの写真を視覚言語モデルでPDDLに変換し行動計画を生成、Naoロボットが自律実行して学習者を支援するシステムを提案した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Lada Kudláčková
分類: cs.RO, cs.AI
原文アブストラクト
In robot-assisted education, a robot must understand how to complete a task in order to effectively guide a student through it. We present a novel method that enables a semi-autonomous, camera-equipped robot to recognise the task goal and plan actions to achieve it. Our work focuses on Shoebox Tasks, an activity commonly used in the education of individuals with Autism Spectrum Disorder (ASD). These tasks are designed so that the goal can be inferred directly from their visual structure. We have developed a solver that uses a vision-based Large Language Model to convert photos of a Shoebox Task into a Planning Domain Definition Language (PDDL) representation and generate action plans for solving it. We have also implemented a robotic interface that enables a Nao robot to autonomously execute various Shoebox Tasks and assist a student by suggesting next steps or signalling detected failures through action demonstrations, voice commands, or gestures. With an adapted robotic interface, the solver can be integrated into a variety of educational robots. No programming expertise is required from teachers, and the solver operates exclusively on captured images as input. Research in special educational needs indicates that students with ASD can benefit substantially from robot-assisted teaching, and our system aims to strengthen these learning opportunities while also fostering interest in robotics among individuals with ASD.
関連論文
- ROSを超えて:WebotsコントローラをTurtleBot3で直接動かせる自作ライブラリによる教育用ロボティクス教育ロボティクス
- スウェーデンとイタリアの中学生を対象としたプログラミング・ロボティクス・自動制御の教育介入教育ロボティクス
- 低コストロボティクスを活用したK-12 STEM教育:水質モニタリングタスクを通じて教育ロボティクス
- Earthquaker-AI:小学校向け地震教育のためのルーブリック評価を備えた検索拡張生成フレームワーク教育ロボティクス
- REMindのプレイテスト評価:教育用ロボット媒介ロールプレイゲームの検証教育ロボティクス
- MotiBo: 自己決定理論に基づく対話型デジタルストーリーテリングロボットが学生の動機づけに与える影響教育ロボティクス
