تطبيق Look to Speak تقنية تتبع نظرة العين لمن يعانون مشاكل فى الحركة والكلام

طورت شركة جوجل تطبيقًا تجريبيًا جديدًا لنظام أندرويد يسمى Look to Speak بالتعاون مع معالج النطق واللغة (ريتشارد كيف) Richard Cave.
والتطبيق للأشخاص الذين يعانون من مشاكل فى الكلام والحركة، ويتيح لهم استخدام أعينهم لتحديد العبارات على الشاشة، إذ يتتبع التطبيق الجديد، الذى يطلق عليه اسم Look to Speak ، حركة عين المستخدم للاختيار من بين قائمة العبارات الخاصة بالهاتف لنطقها بصوت عالى.
تتطلب ميزة Look to Speak من المستخدمين اختيار العبارة التى يريدونها إما من خلال النظر مباشرة إلى اليسار أو اليمين من شاشة الهاتف الذكى، مع إبقاء رؤوسهم ثابتة.من المهم أن ينظر المستخدمون خارج الشاشة بدلاً من مجرد النظر إلى اليسار أو اليمين من شاشة الهاتف الذكى لمساعدة التكنولوجيا فى فك تشفير نظرة العين.تعرض واجهة التطبيق قائمة من 16 عبارة موزعة على عمودين – نصفها فى العمود الأيسر والنصف الآخر على اليمين، ويتم سرد كل عبارة متاحة فى أحد العمودين، فعلى سبيل المثال، قد يرغب المستخدم فى لفظ عبارة “كيف حالك؟”، والتى قد تكون مدرجة فى العمود الأيمن، فسيحتاج المستخدمون إلى النظر إلى اليمين للسماح للتطبيق بمعرفة أن العبارة التى يريدونها موجودة على اليمين وليست على اليسار، وفى هذه المرحلة، سيتجاهل Look to Speak العبارات المدرجة على اليسار.
وسيقوم بعد ذلك التطبيق بإعادة تنظيم الخيارات الثمانية المتبقية بحيث يتم تقسيمها مرة أخرى بالتساوى فى العمودين، ويحتاج المستخدمون فقط إلى تكرار العملية، ويمكن للمستخدمين فى أى وقت البحث لإلغاء العملية وبدء العملية مرة أخرى أو غفوة ومتابعة العملية لاحقًا، ولا يمكن التحكم فى التطبيق تمامًا بالعينين، ومع ذلك – يتعين على شخص ما الضغط على الشاشة للوصول إلى القائمة وخياراتها المختلفة.لذلك، إذا كان شخص ما يعانى من إعاقة حركية تمنعه من استخدام يديه يستخدم التطبيق، فسيحتاج إلى شخص ما لمساعدته فى الوصول إلى خيارات القائمة.
وتتضمن خيارات القائمة الإعدادات، حيث يمكن للمستخدمين تعديل حساسية نظرات العين، وشاشة التدريب، ودروس الشاشة، وتعديل كتاب تفسير العبارات الشائعة.
ويسمح تعديل كتاب تفسير العبارات الشائعة للمستخدمين بإضفاء الطابع الشخصى على الكلمات والعبارات التى تظهر على الشاشة وتساعد “الأشخاص على مشاركة أصواتهم الأصلية” ، كما قال كيف.وأضاف كيف أن جميع البيانات خاصة ولا تترك الهاتف أبدً.
ويتوفر Look to Speak الآن لمستخدمى أندرويد ومتوافق مع Android 9.0 وما فوق، بما فى ذلك Android One ويأتي التطبيق بصفته جزءًا من مشروع Start with One تحت مظلة Experiments with Google، وتضمنت المشاريع الأخرى Teachable Machine، وهي أداة للويب تتيح للمستخدمين إنشاء نماذج للتعلم الآلي دون الحاجة إلى البرمجة.