قامت جوجل بتوسيع مشروع Gameface الخاص بها، وهو مشروع مفتوح المصدر يهدف إلى جعل الأجهزة التقنية أكثر سهولة للوصول إلى نظام Android، والآن يمكن استخدامه للتحكم في واجهة الهاتف الذكي. تم تقديم المشروع لأول مرة خلال Google I/O 2023 كفأرة ألعاب بدون استخدام اليدين يمكن التحكم فيها باستخدام حركات الرأس وتعبيرات الوجه. تم تصميمها لأولئك الذين يعانون من إعاقات جسدية ولا يمكنهم استخدام أيديهم أو صوتهم للتحكم في الأجهزة. مع الحفاظ على الأداء نفسه، يضيف إصدار Android مؤشرًا افتراضيًا للسماح للمستخدمين بالتحكم في أجهزتهم دون لمسها.
في إعلان صدر في منشور مدونتها الذي يركز على المطورين، قالت Google: “نحن نوفر المزيد من التعليمات البرمجية لمشروع Project Gameface لمساعدة المطورين على إنشاء تطبيقات Android لجعل الوصول إلى كل جهاز يعمل بنظام Android أكثر سهولة. ومن خلال كاميرا الجهاز، فإنه يتتبع تعبيرات الوجه وحركات الرأس بسلاسة، ويترجمها إلى تحكم بديهي وشخصي. علاوة على ذلك، طلبت الشركة من المطورين استخدام الأدوات لإضافة ميزات إمكانية الوصول إلى تطبيقاتهم أيضًا.
تعاون Project Gameface مع منظمة Incluzza الهندية التي تدعم الأشخاص ذوي الإعاقة. ومن خلال التعاون، تعلم المشروع كيف يمكن توسيع تقنياته لتشمل حالات استخدام مختلفة مثل كتابة رسالة والبحث عن وظائف والمزيد. لقد استخدمت واجهة برمجة تطبيقات Face Landmarks Detection API الخاصة بـ MediaPipe وخدمة الوصول إلى Android لإنشاء مؤشر افتراضي جديد لأجهزة Android. يتحرك المؤشر متتبعًا حركة رأس المستخدم بعد تتبعها باستخدام الكاميرا الأمامية.
تتعرف واجهة برمجة التطبيقات (API) على 52 إيماءة للوجه بما في ذلك رفع الحاجب وفتح الفم وتحريك الشفاه والمزيد. تُستخدم هذه الحركات الـ 52 للتحكم في مجموعة واسعة من الوظائف على جهاز Android وتعيينها. إحدى الميزات المثيرة للاهتمام هي السحب. يمكن للمستخدمين استخدام هذا لتمرير الشاشة الرئيسية. لإنشاء تأثير السحب، سيتعين على المستخدمين تحديد نقطة البداية والنهاية. يمكن أن يكون الأمر مثل فتح الفم وتحريك الرأس، وبمجرد الوصول إلى نقطة النهاية، يتم إغلاق الفم مرة أخرى.
والجدير بالذكر أنه على الرغم من إتاحة هذه التقنية على GitHub، إلا أن الأمر متروك الآن للمطورين لإنشاء تطبيقات باستخدام هذا الخيار لجعلها في متناول المستخدمين. قدمت Apple أيضًا مؤخرًا ميزة جديدة تستخدم تتبع العين للتحكم في iPhone.
