Aplikasi Android akan segera memungkinkan Anda menggunakan wajah Anda untuk mengontrol kursor Anda

Pengembang sekarang dapat mengintegrasikan fitur aksesibilitas ke dalam aplikasi mereka, memungkinkan pengguna mengontrol kursor dengan gerakan wajah atau dengan menggerakkan kepala mereka. Misalnya, mereka dapat membuka mulut mereka untuk memindahkan kursor atau mengangkat alis mereka untuk mengklik dan menarik.

Diumumkan selama Google I/O tahun lalu untuk desktop, Proyek Gameface menggunakan kamera perangkat dan database ekspresi wajah dari API Deteksi Landmark Wajah MediaPipe untuk memanipulasi kursor.

“Melalui kamera perangkat, itu dengan lancar melacak ekspresi wajah dan gerakan kepala, menerjemahkan mereka ke dalam kontrol yang intuitif dan personal,” Google menjelaskan dalam pengumumannya. “Pengembang sekarang dapat membangun aplikasi di mana penggunanya dapat mengonfigurasi pengalaman mereka dengan menyesuaikan ekspresi wajah, ukuran gerakan, kecepatan kursor, dan lainnya.”

Meskipun Gameface awalnya dibuat untuk gamer, Google mengatakan bahwa mereka juga telah bermitra dengan Incluzza — sebuah perusahaan sosial di India yang berfokus pada aksesibilitas — untuk melihat bagaimana mereka dapat memperluasnya ke pengaturan lain seperti pekerjaan, sekolah, dan situasi sosial.

Proyek Gameface terinspirasi oleh streamer video game quadriplegic Lance Carr, yang memiliki distrofi otot. Carr berkolaborasi dengan Google dalam proyek ini, dengan tujuan menciptakan alternatif yang lebih terjangkau dan mudah diakses dibandingkan dengan sistem pelacakan kepala yang mahal.