Le curseur mains libres accessible de Google arrive sur Android
Gameface devient mobile.
Les utilisateurs d'Android auront bientôt accès à une forme de contrôle d'appareil révolutionnairement accessible : une navigation entièrement mains libres, utilisant la puissance de l'IA de Google et du suivi facial.
Faisant partie de la longue liste de mises à jour et d'annonces de la société déployées aujourd'hui lors de son événement principal pour les développeurs, la nouvelle fonctionnalité est une version mobile de l'offre de bureau de Google connue sous le nom de Project Gameface. Le nouveau curseur virtuel utilise les services d'accessibilité Android et une base de données d'expressions faciales de l'API de détection de points de repère de MediaPipe pour permettre une personnalisation et une manipulation plus larges de la technologie mains libres pour les utilisateurs et les développeurs.
« Grâce à la caméra de l'appareil, il suit de manière transparente les expressions faciales et les mouvements de la tête, les traduisant en un contrôle intuitif et personnalisé. Les développeurs peuvent désormais créer des applications dans lesquelles leurs utilisateurs peuvent configurer leur expérience en personnalisant les expressions faciales, la taille des gestes, la vitesse du curseur, et bien plus encore. » Google l'a expliqué dans son annonce.
Google s'est associé au groupe international de solutions d'accessibilité Incluzza pour tester l'expansion de Gameface dans des contextes plus larges, hors jeu, y compris les tâches professionnelles et sociales.
Le projet Gameface a été lancé pour la première fois en 2023 en tant que souris de jeu mains libres open source permettant aux utilisateurs d'utiliser les curseurs de l'ordinateur avec uniquement des mouvements de la tête et du visage. La technologie a été conçue en collaboration avec le streamer de jeux vidéo viraux Lance Carr, tétraplégique, comme une option plus accessible aux systèmes de suivi de tête coûteux. Il a également introduit l'option de taille des gestes, permettant une plus grande personnalisation pour les utilisateurs de mobilité différente.
« Nous avons été ravis de voir des entreprises comme playAbility utiliser les éléments de base du Project Gameface, comme MediaPipe Blendshapes, dans leur logiciel inclusif », a écrit Google. « Maintenant, nous approvisionnons davantage de code pour le projet Gameface afin d'aider les développeurs à créer des applications Android afin de rendre chaque appareil Android plus accessible. »
Google a également annoncé de nouvelles fonctionnalités d'IA pour sa technologie de lecteur d'écran, TalkBack, qui fourniront des descriptions plus détaillées et rempliront des informations sur les images non étiquetées sur le Web afin d'aider les utilisateurs aveugles ou malvoyants.
Project Gameface est désormais disponible pour les développeurs sur GitHub.
