2025-11-21T15:04:16.225643

Two Explorative Studies on Tangible Augmented Reality for Neurodevelopmental Disorders

Vona, Valcamonica, Garzotto
Tangible Augmented Reality (TAR) is an interaction paradigm that integrates physical and digital worlds to create immersive, interactive experiences. This paper explores two TAR applications, Holomarket and Along the Oceanic Flow (ATOF), and presents insights from two exploratory studies evaluating their usability and likeability among individuals with neurodevelopmental disorders (NDD). Holomarket is designed to simulate a supermarket shopping experience, helping users develop essential life skills such as item selection, basic arithmetic, and money handling. Participants interacted with augmented food items and a smart cash register, navigating a virtual supermarket environment. While participants enjoyed the realistic setting and tangible interactions, some usability challenges, such as difficulty manipulating virtual objects and discomfort with prolonged headset use, were noted. ATOF transforms the user environment into an oceanic world, where participants use a dolphin-shaped smart object to complete tasks like collecting items and solving puzzles. This application aims to improve motor coordination and cognitive skills. Participants appreciated the immersive experience, the customizable tasks, and the tangible dolphin interface. However, some faced difficulties interacting with specific virtual elements. Overall, both applications demonstrated potential as therapeutic tools for NDD, offering engaging and immersive experiences. Despite some usability challenges and hardware limitations, the positive feedback suggests that TAR could play a crucial role in future therapeutic interventions. Further research is needed to refine these applications and enhance user interaction and comfort.
academic

神経発達障害に対する有形拡張現実に関する2つの探索的研究

基本情報

  • 論文ID: 2510.14598
  • タイトル: Two Explorative Studies on Tangible Augmented Reality for Neurodevelopmental Disorders
  • 著者: Francesco Vona (University of Applied Sciences Hamm-Lippstadt)、Giulia Valcamonica (Politecnico di Milano)、Franca Garzotto (Politecnico di Milano)
  • 分類: cs.HC (ヒューマンコンピュータインタラクション)
  • 発表日: 2025年10月16日
  • 論文リンク: https://arxiv.org/abs/2510.14598

要約

本論文は、2つの有形拡張現実(TAR)アプリケーション——Holomarketと「Along the Oceanic Flow (ATOF)」——を探索し、2つの探索的研究を通じて神経発達障害(NDD)患者集団における使いやすさと好感度を評価しました。Holomarketはスーパーマーケットでの買い物体験をシミュレートし、ユーザーが基本的な生活スキルを習得するのを支援します。ATOFはユーザーの環境を海洋世界に変換し、イルカ形状のスマートオブジェクトを通じて運動協調性と認知スキルを向上させます。いくつかの使いやすさの課題とハードウェアの制限にもかかわらず、肯定的なフィードバックは、将来の治療介入においてTARが重要な可能性を持つことを示唆しています。

研究背景と動機

問題定義

本研究は、神経発達障害(NDD)患者集団が日常生活スキルの訓練と治療介入において直面する課題に対処することを目的としています。NDDには自閉症スペクトラム障害(ASD)、注意欠陥多動性障害(ADHD)、知的障害などが含まれ、これらの疾患は認知、社会的、および運動機能に影響を与えます。

問題の重要性

  1. 治療ニーズの緊急性: NDDは個人の日常生活能力に影響を与え、個別化された治療介入が必要です
  2. 従来の方法の限界: 既存のAR/VR治療方法は触覚的相互作用に欠け、NDD患者集団は特に多感覚参加から恩恵を受けます
  3. 技術発展の機会: 没入型技術の急速な発展は治療介入のための新しいフロンティアを開きました

既存方法の限界性

  • AR/VR治療は有形的相互作用要素に欠ける
  • NDD患者集団向けの専門的な設計原則が不足している
  • 物理的および デジタル相互作用の統合が不十分である

研究動機

TAR技術とスマートオブジェクトを組み合わせることにより、NDD患者集団のための直感的で高い参加度の治療体験を創造し、従来のAR治療における触覚フィードバックの欠落を補うこと。

核心的貢献

  1. 先駆的研究: 著者の知る限り、NDD患者集団におけるTARの応用を探索する最初の研究です
  2. 二重アプリケーション開発: 異なるスキル訓練を対象とした2つのTARアプリケーションシステムを開発しました
  3. 実証的評価: 探索的研究を通じてNDD治療におけるTARの実行可能性と受容度を検証しました
  4. 設計ガイダンス: TAR応用設計の重要な経験と指導原則を提供しました
  5. 学際的協力: 心理学者、ケアワーカー、エンジニアの協力設計の成果を示しました

方法論の詳細

タスク定義

本研究は2つの異なる治療タスクを定義しました:

  1. 生活スキル訓練: Holomarketを通じた買い物、算術、金銭処理能力の育成
  2. 運動認知訓練: ATOFを通じた運動協調性と認知スキルの向上

システムアーキテクチャ

Holomarketシステム

  • コアコンポーネント:
    • AR表示デバイスとしてのMicrosoft HoloLens
    • ホログラフィック食品棚と買い物リスト
    • RFID搭載のスマートレジスター
    • RFIDタグ付きの食品小道具と通貨
  • 相互作用モード:
    • Each Price Mode: 記憶ゲームと買い物体験の組み合わせ
    • Total Price Mode: 合計金額計算と支払い訓練
  • 技術実装: Unity、Visual Studio、Vuforia、Mixed Reality Toolkit (MRTK)を使用して開発

ATOFシステム

  • コアコンポーネント:
    • 海洋テーマの没入型環境
    • 相互作用ツールとしてのイルカ形状のスマートオブジェクト
    • 空間マッピングと環境適応
  • ゲームモード:
    • Infinity Mode: バブルリングの収集と障害物の回避
    • Adventure Mode: ストーリー駆動の段階的タスク

技術的革新点

  1. TAR範例の統合: AR技術と物理的スマートオブジェクトのシームレスな組み合わせ
  2. 環境適応性: 空間マッピング技術による異なる物理環境への適応
  3. 個別カスタマイズ: ユーザーの能力に応じたタスク難度とパラメータの調整をサポート
  4. 多感覚フィードバック: 視覚、触覚、聴覚フィードバックの組み合わせにより没入感を向上

実験設定

参加者

ATOF研究

  • サンプルサイズ: NDD患者11名
  • 性別分布: 男性5名(45.5%)、女性6名(54.5%)
  • 年齢: 平均30.09歳(SD=6.24)、範囲20-44歳
  • 診断分布:
    • 中度知的障害: 45.5%
    • 重度知的障害: 27.3%
    • 遺伝性症候群: 18.2%
    • 自閉症スペクトラム障害: 9.1%

Holomarket研究

  • サンプルサイズ: 軽度認知障害患者5名
  • 性別分布: 男性2名(40%)、女性3名(60%)
  • 年齢: 平均36.0歳(SD=6.2)

評価指標

7点リッカート尺度を使用して2つの次元を評価:

  1. 好感度(Likeability): アプリケーションに対するユーザーの享受度
  2. 使いやすさ(Usability): アプリケーションの易用性と相互作用メカニズムの直感性

実験手順

ATOF実験

  • 期間: 2日間
  • 1日目: 部屋の探索と標準チュートリアル
  • 2日目: 高度なチュートリアルとアンケート調査
  • 環境: 5×4メートルの体育館

Holomarket実験

  • 期間: 単一セッション
  • タスク構成: 15種類の食品棚、4種類の買い物リスト品目
  • 環境: 3×5メートルの中央通路

実験結果

ATOF主要結果

定量的結果

  • 好感度平均スコア: M = 5.2 (SD = 1.21)、満点7点
  • 使いやすさ平均スコア: M = 5.4 (SD = 1.36)、満点7点

定性的観察

  • ほとんどのユーザーが濃厚な興味を示しました
  • ユーザーは異なるタスク構成を試したいという希望を表明し、個別カスタマイズの重要性を証明しました
  • ユーザーはHoloLensの受容度が良好で、混乱や恐怖は見られませんでした
  • 一部のユーザーは「別の興味深い世界に転送された感覚」を感じたと主張しました

Holomarket主要結果

定量的結果

  • 好感度平均スコア: 51.75/70 (SD = 6.94)
  • 使いやすさ平均スコア: 63.5/70 (SD = 5.68)

主要な発見

  • ユーザーは仮想スーパーマーケット環境を普遍的に好みました
  • 買い物リストと棚の品目の接続が好評でした
  • ピンチジェスチャー操作は困難で、外部支援が必要でした
  • HoloLensの装着快適性に問題があり、頻繁な調整が必要でした

共通の課題

  1. 相互作用の困難: 仮想オブジェクト操作が十分に直感的ではない
  2. ハードウェアの制限: HoloLensの視野制限と装着不快感
  3. フィードバックの不明確さ: システムフィードバックメカニズムの改善が必要
  4. ジェスチャー認識: ピンチドラッグ動作がユーザーにとって不自然

関連研究

TAR技術の発展

  • 教育、治療、設計分野におけるTAR技術の応用可能性
  • 有形ホログラムの概念: 仮想オブジェクトと物理的拡張の融合
  • 静電容量式3Dプリント対象による遠隔相互作用の実現

NDD治療技術

  • NDD治療におけるAR/VRの応用: 運動スキル、認知機能、社会的相互作用の改善
  • Polipoタンジブルおもちゃ: 認知と社会的発展を強化する物理的相互作用
  • 重度ASD患者におけるHoloLens 2のパイロット研究

研究ギャップ

AR/VRがNDD治療で有望性を示しているにもかかわらず、NDD固有のニーズに対応するように設計されたTARソリューションは依然として不足しています。

結論と考察

主要な結論

  1. TAR可能性の検証: 両アプリケーションはNDD治療ツールとしての可能性を示しました
  2. 高いユーザー受容度: 参加者はTAR体験を普遍的に楽しみ、魅力的であると考えました
  3. 技術的実行可能性: TAR範例は物理的およびデジタル相互作用の統合に成功することができます
  4. 個別化の必要性: カスタマイズはNDD治療アプリケーションにとって重要です

設計経験の総括

ATOFからの経験

  1. 対象グループ: TARアプリケーションは中度障害ユーザーに最も有益ですが、重度障害ユーザーにも有望性を示しています
  2. カスタマイズの重要性: 個人の能力に応じたタスク調整は使いやすさと好感度の向上に重要です
  3. 共有体験の価値: 複数ユーザーの参加と治療士のリアルタイム監視は参加度を向上させます

Holomarketからの経験

  1. リアリズムの価値: 仮想スーパーマーケット環境のリアリズムはユーザーに歓迎されました
  2. 相互作用設計の課題: 複雑なジェスチャーに代わるより直感的な相互作用方法が必要です
  3. ハードウェア適応の必要性: デバイスの快適性と視野制限は技術改善が必要です

限界性

  1. サンプルサイズの制限: 小規模サンプルは統計分析と結果の一般化を制限します
  2. 研究期間の短さ: 長期的な利益または改善を評価できません
  3. ハードウェアの制約: HoloLensの技術的制限はユーザー体験に影響を与えます
  4. 相互作用の複雑性: ジェスチャー相互作用は対象ユーザー集団にとって過度に複雑です

今後の方向性

技術改善

  1. HoloLens 2へのアップグレード: ジェスチャー認識と相互作用の直感性を改善
  2. データ収集の強化: 詳細なパフォーマンス分析メトリクス
  3. 協調体験: 複数デバイスの協調と協力問題解決タスク

研究計画

  1. 長期研究: TAR応用効果を評価する6ヶ月対照研究
  2. 規模の拡大: ミラノの3つの治療センターとの協力による大規模サンプル取得
  3. 対照比較: TAR介入と従来の治療方法の効果比較

深層評価

利点

  1. 革新性が強い: NDD治療におけるTARの応用を初めて体系的に探索しました
  2. 実践的価値が高い: AR治療における触覚フィードバック欠落の実際的問題を解決しました
  3. 設計が厳密: 共同設計方法を採用し、専門家とユーザーニーズを統合しました
  4. 評価が包括的: 使いやすさと好感度の2つの次元から評価しました
  5. 学際的協力: 技術と医療分野の効果的な結合を体現しています

不足点

  1. サンプルサイズが小さい: 結果の統計的検定力と一般化可能性を制限します
  2. 対照群がない: 従来の治療方法との直接比較ができません
  3. 短期評価: 長期的な治療効果を評価できません
  4. 技術依存性が強い: 現在のARハードウェアの技術的制限に制約されます
  5. 個人差が大きい: 参加者の異質性がデータ分析の複雑性を増加させます

影響力

学術的貢献

  • NDD治療分野におけるTAR研究の方向性を開拓しました
  • 後続研究のための設計フレームワークと評価方法を提供しました
  • AR治療における触覚相互作用研究のギャップを埋めました

実用的価値

  • 治療機関に新しい介入ツール選択肢を提供しました
  • 特殊人口集団における没入型技術の応用実行可能性を検証しました
  • 関連製品開発のためのユーザーニーズの洞察を提供しました

再現性

  • 詳細な技術実装説明を提供しました
  • オープンソースツールとプラットフォームの使用により再現性を強化しました
  • 明確な実験手順により他の研究者による検証が容易です

適用シーン

  1. 治療機関: デイケアセンター、リハビリテーション病院の補助治療
  2. 教育環境: 特別支援学校のスキル訓練
  3. 家庭使用: 専門家指導下での家庭治療サポート
  4. 研究応用: NDD治療効果評価と介入方法研究

参考文献

本論文は18篇の関連文献を引用しており、主に以下を含みます:

  • TAR技術の発展と応用研究
  • NDD治療におけるAR/VRの応用
  • タンジブルインターフェースとスマートオブジェクト設計
  • 神経発達障害の診断と治療基準

重要な参考文献にはDSM-5診断基準、自閉症介入におけるARの体系的レビュー、およびタンジブルデジタルナラティブツールの関連研究が含まれます。

総合評価: これは神経発達障害治療におけるTAR技術の応用を初めて体系的に探索した、開創的意義を持つHCI研究論文です。サンプルサイズと研究期間の制限にもかかわらず、その革新的な技術ソリューション、厳密な設計方法、および肯定的な初期結果は、この分野の発展のための重要な基礎を確立しています。論文の学際的特性と実用的価値は、重要な学術的および社会的意義を持たせています。