2025-11-21T15:04:16.225643

Two Explorative Studies on Tangible Augmented Reality for Neurodevelopmental Disorders

Vona, Valcamonica, Garzotto
Tangible Augmented Reality (TAR) is an interaction paradigm that integrates physical and digital worlds to create immersive, interactive experiences. This paper explores two TAR applications, Holomarket and Along the Oceanic Flow (ATOF), and presents insights from two exploratory studies evaluating their usability and likeability among individuals with neurodevelopmental disorders (NDD). Holomarket is designed to simulate a supermarket shopping experience, helping users develop essential life skills such as item selection, basic arithmetic, and money handling. Participants interacted with augmented food items and a smart cash register, navigating a virtual supermarket environment. While participants enjoyed the realistic setting and tangible interactions, some usability challenges, such as difficulty manipulating virtual objects and discomfort with prolonged headset use, were noted. ATOF transforms the user environment into an oceanic world, where participants use a dolphin-shaped smart object to complete tasks like collecting items and solving puzzles. This application aims to improve motor coordination and cognitive skills. Participants appreciated the immersive experience, the customizable tasks, and the tangible dolphin interface. However, some faced difficulties interacting with specific virtual elements. Overall, both applications demonstrated potential as therapeutic tools for NDD, offering engaging and immersive experiences. Despite some usability challenges and hardware limitations, the positive feedback suggests that TAR could play a crucial role in future therapeutic interventions. Further research is needed to refine these applications and enhance user interaction and comfort.
academic

دراستان استكشافيتان حول الواقع المعزز الملموس للاضطرابات النمائية العصبية

المعلومات الأساسية

  • معرّف الورقة البحثية: 2510.14598
  • العنوان: Two Explorative Studies on Tangible Augmented Reality for Neurodevelopmental Disorders
  • المؤلفون: Francesco Vona (جامعة العلوم التطبيقية هام-ليبشتات)، Giulia Valcamonica (البوليتكنيكو دي ميلانو)، Franca Garzotto (البوليتكنيكو دي ميلانو)
  • التصنيف: cs.HC (التفاعل بين الإنسان والحاسوب)
  • تاريخ النشر: 16 أكتوبر 2025
  • رابط الورقة: https://arxiv.org/abs/2510.14598

الملخص

تستكشف هذه الورقة تطبيقين للواقع المعزز الملموس (TAR) - Holomarket و Along the Oceanic Flow (ATOF) - وتقيّم قابليتهما للاستخدام والتفضيل لديهما من خلال دراستين استكشافيتين في مجموعات الاضطرابات النمائية العصبية (NDD). يحاكي Holomarket تجربة التسوق في السوبرماركت لمساعدة المستخدمين على تطوير مهارات الحياة الأساسية؛ بينما يحول ATOF بيئة المستخدم إلى عالم محيطي، مما يعزز التنسيق الحركي والمهارات المعرفية من خلال كائنات ذكية على شكل دلافين. على الرغم من وجود بعض التحديات في قابلية الاستخدام والقيود الحاصلة في الأجهزة، تشير التعليقات الإيجابية إلى إمكانيات كبيرة للواقع المعزز الملموس في التدخلات العلاجية المستقبلية.

خلفية البحث والدافع

تحديد المشكلة

يهدف هذا البحث إلى معالجة التحديات التي تواجهها مجموعات الاضطرابات النمائية العصبية (NDD) في تدريب مهارات الحياة اليومية والتدخلات العلاجية. تشمل الاضطرابات النمائية العصبية اضطراب طيف التوحد (ASD) واضطراب نقص الانتباه وفرط النشاط (ADHD) والإعاقة الذهنية وغيرها، وهذه الاضطرابات تؤثر على الوظائف المعرفية والاجتماعية والحركية.

أهمية المشكلة

  1. الحاجة العلاجية الملحة: تؤثر الاضطرابات النمائية العصبية على قدرة الفرد على أداء الأنشطة اليومية، مما يتطلب تدخلات علاجية مخصصة
  2. قيود الطرق التقليدية: تفتقر طرق الواقع المعزز والواقع الافتراضي الحالية إلى التفاعل الملموس، بينما تستفيد مجموعات الاضطرابات النمائية العصبية بشكل خاص من المشاركة متعددة الحواس
  3. فرص التطور التكنولوجي: يفتح التطور السريع للتقنيات الغامرة آفاقاً جديدة للتدخلات العلاجية

قيود الطرق الموجودة

  • تفتقر تطبيقات الواقع المعزز والواقع الافتراضي العلاجية إلى عناصر التفاعل الملموس
  • غياب مبادئ التصميم المتخصصة لمجموعات الاضطرابات النمائية العصبية
  • عدم كفاية التكامل بين التفاعلات الفيزيائية والرقمية

دافع البحث

من خلال دمج تقنية الواقع المعزز الملموس مع الكائنات الذكية (Smart Objects)، إنشاء تجارب علاجية حدسية وعالية الانخراط لمجموعات الاضطرابات النمائية العصبية، مما يسد الفجوة في الملاحظات اللمسية المفقودة في تطبيقات الواقع المعزز التقليدية.

المساهمات الأساسية

  1. بحث رائد: هذا هو أول بحث يستكشف تطبيق الواقع المعزز الملموس في مجموعات الاضطرابات النمائية العصبية، حسب علم المؤلفين
  2. تطوير تطبيقين: تطوير نظامي تطبيقات واقع معزز ملموس موجهين لتدريب مهارات مختلفة
  3. تقييم تجريبي: التحقق من جدوى وقبول الواقع المعزز الملموس في العلاج من خلال دراسات استكشافية
  4. إرشادات التصميم: توفير الخبرات الرئيسية والمبادئ الإرشادية لتصميم تطبيقات الواقع المعزز الملموس
  5. التعاون متعدد التخصصات: عرض نتائج التصميم التعاوني بين علماء النفس والممرضات والمهندسين

شرح الطريقة

تحديد المهام

يحدد هذا البحث مهمتين علاجيتين مختلفتين:

  1. تدريب مهارات الحياة: تطوير مهارات التسوق والحسابات والتعامل مع المال من خلال Holomarket
  2. تدريب الحركة والإدراك: تعزيز التنسيق الحركي والمهارات المعرفية من خلال ATOF

العمارة النظامية

نظام Holomarket

  • المكونات الأساسية:
    • Microsoft HoloLens كجهاز عرض الواقع المعزز
    • رفوف الطعام الهولوغرافية وقوائم التسوق
    • ماكينة دفع ذكية مزودة بـ RFID
    • دعائم الطعام وعملات معدنية مزودة بعلامات RFID
  • أنماط التفاعل:
    • وضع السعر الفردي: لعبة الذاكرة مدمجة مع تجربة التسوق
    • وضع السعر الإجمالي: تدريب حساب الإجمالي والدفع
  • التنفيذ التقني: تم التطوير باستخدام Unity و Visual Studio و Vuforia و Mixed Reality Toolkit (MRTK)

نظام ATOF

  • المكونات الأساسية:
    • بيئة غامرة بموضوع محيطي
    • كائنات ذكية على شكل دلافين كأدوات تفاعل
    • رسم الخرائط المكانية والتكيف البيئي
  • أنماط اللعبة:
    • وضع اللانهاية: جمع حلقات الفقاعات وتجنب العقبات
    • وضع المغامرة: مهام تدريجية مدفوعة بالقصة

نقاط الابتكار التكنولوجي

  1. تكامل نموذج الواقع المعزز الملموس: دمج سلس بين تقنية الواقع المعزز والكائنات الفيزيائية الذكية
  2. التكيف البيئي: التكيف مع بيئات فيزيائية مختلفة من خلال تقنية رسم الخرائط المكانية
  3. التخصيص الفردي: دعم تعديل صعوبة المهام والمعاملات وفقاً لقدرات المستخدم
  4. ملاحظات متعددة الحواس: دمج الملاحظات البصرية واللمسية والسمعية لتعزيز الانغماس

إعداد التجربة

المشاركون

دراسة ATOF

  • حجم العينة: 11 مريضاً من مرضى الاضطرابات النمائية العصبية
  • توزيع النوع: 5 ذكور (45.5%)، 6 إناث (54.5%)
  • العمر: متوسط 30.09 سنة (SD=6.24)، النطاق 20-44 سنة
  • توزيع التشخيص:
    • إعاقة ذهنية متوسطة: 45.5%
    • إعاقة ذهنية شديدة: 27.3%
    • متلازمات وراثية: 18.2%
    • اضطراب طيف التوحد: 9.1%

دراسة Holomarket

  • حجم العينة: 5 مرضى يعانون من ضعف إدراكي خفيف
  • توزيع النوع: ذكران (40%)، 3 إناث (60%)
  • العمر: متوسط 36.0 سنة (SD=6.2)

مؤشرات التقييم

تم استخدام مقياس ليكرت من 7 نقاط لتقييم بعدين:

  1. التفضيل (Likeability): درجة استمتاع المستخدم بالتطبيق
  2. قابلية الاستخدام (Usability): سهولة استخدام التطبيق والطبيعة الحدسية لآليات التفاعل

إجراء التجربة

تجربة ATOF

  • المدة: يومان
  • اليوم الأول: استكشاف الغرفة والبرنامج التعليمي القياسي
  • اليوم الثاني: البرنامج التعليمي المتقدم والاستبيان
  • البيئة: صالة رياضية بحجم 5×4 متر

تجربة Holomarket

  • المدة: جلسة واحدة
  • تكوين المهام: 15 رف طعام، 4 عناصر قائمة تسوق
  • البيئة: ممر مركزي بحجم 3×5 متر

نتائج التجربة

النتائج الرئيسية لـ ATOF

النتائج الكمية

  • متوسط درجة التفضيل: M = 5.2 (SD = 1.21)، من أصل 7
  • متوسط درجة قابلية الاستخدام: M = 5.4 (SD = 1.36)، من أصل 7

الملاحظات النوعية

  • أظهر معظم المستخدمين اهتماماً كبيراً
  • أراد المستخدمون تجربة تكوينات مهام مختلفة، مما يثبت أهمية التخصيص
  • أظهر المستخدمون قبولاً جيداً لـ HoloLens، دون حدوث ارتباك أو خوف
  • ادعى بعض المستخدمين أنهم شعروا بأنهم "تم نقلهم إلى عالم آخر مثير للاهتمام"

النتائج الرئيسية لـ Holomarket

النتائج الكمية

  • متوسط درجة التفضيل: 51.75/70 (SD = 6.94)
  • متوسط درجة قابلية الاستخدام: 63.5/70 (SD = 5.68)

النتائج الرئيسية

  • استمتع المستخدمون بشكل عام ببيئة السوبرماركت الافتراضية
  • تم الإشادة بالاتصال بين قائمة التسوق وعناصر الرف
  • واجهت حركات القرص صعوبات، مما تطلب مساعدة خارجية
  • مشاكل الراحة في ارتداء HoloLens، مما تطلب تعديلات متكررة

التحديات المشتركة

  1. صعوبات التفاعل: تفاعل الكائنات الافتراضية ليس حدسياً بما يكفي
  2. قيود الأجهزة: قيود مجال الرؤية في HoloLens وعدم الراحة في الارتداء
  3. عدم وضوح الملاحظات: تحتاج آليات الملاحظات النظامية إلى تحسين
  4. التعرف على الإيماءات: حركات القرص والسحب غير طبيعية للمستخدمين

الأعمال ذات الصلة

تطور تقنية الواقع المعزز الملموس

  • إمكانيات تطبيق تقنية الواقع المعزز الملموس في التعليم والعلاج والتصميم
  • مفهوم الهولوغرام الملموس: دمج الكائنات الافتراضية مع التعزيز الفيزيائي
  • الطباعة ثلاثية الأبعاد السعوية لتحقيق التفاعل عن بعد

تقنيات علاج الاضطرابات النمائية العصبية

  • تطبيقات الواقع المعزز والواقع الافتراضي في علاج الاضطرابات النمائية العصبية: تحسين المهارات الحركية والوظائف المعرفية والتفاعل الاجتماعي
  • لعبة Polipo الملموسة: تعزيز التفاعل الفيزيائي لتطوير الإدراك والتفاعل الاجتماعي
  • دراسة تجريبية لـ HoloLens 2 في مرضى التوحد الشديد

الفجوات البحثية

على الرغم من إظهار الواقع المعزز والواقع الافتراضي لآفاق في علاج الاضطرابات النمائية العصبية، لا تزال حلول الواقع المعزز الملموس المصممة خصيصاً لتلبية احتياجات الاضطرابات النمائية العصبية ناقصة.

الخلاصة والمناقشة

الاستنتاجات الرئيسية

  1. التحقق من إمكانيات الواقع المعزز الملموس: أظهر كلا التطبيقين إمكانيات كأدوات علاجية للاضطرابات النمائية العصبية
  2. قبول المستخدم مرتفع: استمتع المشاركون بشكل عام بتجربة الواقع المعزز الملموس واعتبروها جذابة
  3. الجدوى التقنية: يمكن لنموذج الواقع المعزز الملموس دمج التفاعلات الفيزيائية والرقمية بنجاح
  4. الحاجة إلى التخصيص: يعتبر التخصيص أمراً حاسماً لتطبيقات علاج الاضطرابات النمائية العصبية

ملخص خبرات التصميم

الخبرات من ATOF

  1. المجموعة المستهدفة: تطبيقات الواقع المعزز الملموس مفيدة بشكل خاص للمستخدمين ذوي الإعاقات المتوسطة، لكنها تظهر أيضاً آفاقاً للمستخدمين ذوي الإعاقات الشديدة
  2. أهمية التخصيص: تعديل المهام وفقاً لقدرات الفرد أمر حاسم لتحسين قابلية الاستخدام والتفضيل
  3. قيمة التجربة المشتركة: تعزز المشاركة متعددة المستخدمين والمراقبة الفورية من قبل المعالج الانخراط

الخبرات من Holomarket

  1. قيمة الواقعية: تم الترحيب ببيئة السوبرماركت الافتراضية الواقعية من قبل المستخدمين
  2. تحديات التصميم التفاعلي: هناك حاجة إلى طرق تفاعل أكثر حدسية لاستبدال الإيماءات المعقدة
  3. متطلبات التكيف مع الأجهزة: تحتاج راحة الجهاز وقيود مجال الرؤية إلى تحسينات تقنية

القيود

  1. قيود حجم العينة: يحد حجم العينة الصغير من التحليل الإحصائي وتعميم النتائج
  2. غياب مجموعة التحكم: عدم القدرة على المقارنة المباشرة مع طرق العلاج التقليدية
  3. التقييم قصير الأجل: عدم القدرة على تقييم الفوائد العلاجية طويلة الأجل
  4. الاعتماد التكنولوجي القوي: محدود بالقيود التقنية لأجهزة الواقع المعزز الحالية
  5. الاختلافات الفردية الكبيرة: تزيد الاختلافات بين المشاركين من تعقيد تحليل البيانات

التأثير

المساهمات الأكاديمية

  • فتح اتجاه بحثي جديد لتطبيق الواقع المعزز الملموس في مجال علاج الاضطرابات النمائية العصبية
  • توفير إطار عمل للتصميم وطرق التقييم للأبحاث اللاحقة
  • سد الفجوة البحثية في التفاعل اللمسي في علاج الواقع المعزز

القيمة العملية

  • توفير خيارات أدوات تدخل جديدة لمؤسسات العلاج
  • التحقق من جدوى تطبيق التقنيات الغامرة في المجموعات الخاصة
  • توفير رؤى احتياجات المستخدمين لتطوير المنتجات ذات الصلة

قابلية التكرار

  • توفير وصف تنفيذ تقني مفصل
  • يعزز استخدام الأدوات والمنصات مفتوحة المصدر قابلية التكرار
  • تسهل الإجراءات التجريبية الواضحة التحقق من صحة الباحثين الآخرين

السيناريوهات القابلة للتطبيق

  1. مؤسسات العلاج: مراكز الرعاية النهارية والمستشفيات التأهيلية كعلاج مساعد
  2. البيئات التعليمية: مدارس التعليم الخاص لتدريب المهارات
  3. الاستخدام المنزلي: دعم العلاج المنزلي تحت الإشراف المهني
  4. التطبيقات البحثية: تقييم فعالية علاج الاضطرابات النمائية العصبية وأبحاث طرق التدخل

المراجع

تستشهد هذه الورقة بـ 18 مرجعاً ذا صلة، تغطي بشكل أساسي:

  • أبحاث تطور وتطبيق تقنية الواقع المعزز الملموس
  • تطبيقات الواقع المعزز والواقع الافتراضي في علاج الاضطرابات النمائية العصبية
  • تصميم الواجهات الملموسة والكائنات الذكية
  • معايير التشخيص والعلاج للاضطرابات النمائية العصبية

تشمل المراجع المهمة معايير التشخيص DSM-5، والمراجعة المنهجية لتطبيقات الواقع المعزز في التدخلات التوحدية، والأبحاث ذات الصلة حول أدوات السرد الرقمي الملموس.

التقييم الشامل: هذه ورقة بحثية رائدة في مجال التفاعل بين الإنسان والحاسوب، تستكشف للمرة الأولى بشكل منهجي تطبيق تقنية الواقع المعزز الملموس في علاج الاضطرابات النمائية العصبية. على الرغم من وجود قيود في حجم العينة ومدة البحث، فإن الحل التقني المبتكر والطريقة التصميمية الصارمة والنتائج الأولية الإيجابية توضع أساساً مهماً لتطور هذا المجال. تجعل الطبيعة متعددة التخصصات للورقة والقيمة العملية لها ذات أهمية أكاديمية واجتماعية كبيرة.