قامت جامعة هارفارد بتطوير تطبيق "All_Aboard" لاستخدام كاميرا الهاتف الذكي لتوجيه المكفوفين إلى محطات الحافلات

تم تطوير تطبيق الذكاء الاصطناعي، المسمى "All_Aboard"، من قبل فريق من العلماء في مركز ماساتشوستس لعلاج وأبحاث العيون والأذن التابع لجامعة هارفارد. يمكن استخدامه مع تطبيقات الملاحة المعتمدة على نظام تحديد المواقع العالمي (GPS) التابعة لجهات خارجية مثل خرائط Google.

يستخدم المستخدمون أولاً تطبيقات أخرى لتحديد الموقع التقريبي لمحطات الحافلات. ثم افتح All_Aboard وارفع هاتفك الذكي للسماح للكاميرا الخلفية "برؤية" الشارع المحيط.

وفقًا للتقارير، يستخدم التطبيق شبكة عصبية للتعلم العميق ليتم تدريبه على حوالي 10000 صورة لمحطة الحافلات في المدينة، ويمكنه تحديد علامة التوقف المستهدفة بشكل حدسي إذا كانت على بعد 50 قدمًا (15 مترًا). وبمجرد رصد لافتة، يرشد التطبيق المستخدم من خلال أصوات تنبيه تشبه السونار تتغير في درجة الصوت والسرعة مع اقتراب المستخدم من محطة الحافلات.

في الاختبار الميداني، استخدم 24 متطوعًا مكفوفًا كلاً من خرائط Google وAll_Aboard لتحديد إجمالي 20 محطة للحافلات، 10 منها في المناطق الحضرية (بوسطن) و10 في مناطق الضواحي (نيوتن، ماساتشوستس).

عندما يتعلق الأمر بالتواجد "بالقرب الكافي" من هذه المحطات، تنجح خرائط Google بنسبة 52% فقط من الوقت، بينما يعمل All_Aboard على تحسين معدل النجاح إلى 93%. بالإضافة إلى ذلك، يبلغ متوسط ​​المسافة بين نقاط نهاية خريطة خرائط Google ومحطات الحافلات الفعلية 6.62 مترًا (21.7 قدمًا)، في حين يبلغ متوسط ​​مسافة All_Aboard 1.54 مترًا (5 أقدام) فقط.

وقال لو جانج، الأستاذ المساعد في قسم العيون والأذن في ماساتشوستس: "تظهر نتائج بحثنا أن تطبيق All_Aboard يمكن أن يساعد المسافرين ضعاف البصر على التنقل والكشف الدقيق عن محطات الحافلات، مما يقلل بشكل كبير من فرصتهم في تفويت الحافلة بسبب الوقوف بعيدًا جدًا عن محطة الحافلات". "توضح هذه الدراسة أنه يمكن الاستفادة من قدرات التعرف على الأشياء القائمة على رؤية الكمبيوتر بطريقة تكاملية وتحقيق فوائد إضافية لخدمات الملاحة الكلية القائمة على الخرائط البحتة في بيئات العالم الحقيقي."

حتى الآن، تم تدريب All_Aboard في 10 مدن رئيسية حول العالم وهو متاح على iPhone عبر AppStore. تم تقديمه مؤخرًا في ورقة بحثية نُشرت في مجلة Translational Vision Science & Technology، وتم عرضه في الفيديو أدناه.