Google vous permettra de contrôler votre mobile Android avec votre visage : c'est le Project Gameface

La Google I/O de 2024 a été marquée par les nombreuses nouveautés liées à l'IA, ainsi qu'à Android 15. Mais l'entreprise a également fait une annonce très importante qui est passée inaperçue : le lancement de Projet Gamefaceune technologie capable de permettre à un utilisateur contrôlez les applications sur Android uniquement en utilisant votre visage. Il s'agit d'une fonctionnalité d'accessibilité similaire à celle introduite par Apple et qui arrivera avec iOS 18.

Google décrit le projet Gameface comme « une « souris » qui permet aux utilisateurs de contrôler le curseur d'un ordinateur à l'aide de mouvements de la tête et de gestes du visage. » Par exemple, l'utilisateur peut ouvrez la bouche pour déplacer le curseur ou levez les sourcils pour cliquer et faire glisser n'importe quel élémentexplique l'entreprise dans un article sur son blog.

Pour cela, Google utilise la caméra frontale intégrée à l'appareil lui-même, capable de reconnaître les gestes du visage de l'utilisateur et d'associer chaque geste à une action spécifique, par exemple sourire pour cliquer. Project Gameface permet également de personnaliser l'intensité ou la vitesse du geste. De cette façon, l'utilisateur ne peut réaliser l'action que si le sourire est plus prononcé, ou s'il hausse les sourcils plus rapidement ou plus lentement, etc.

Le Project Gameface de Google peut être utilisé dans les applications Android

Google, qui travaille sur ce projet depuis un certain temps, implémente ce système sur Android via une API de MediaPipe, qui propose des solutions d'intelligence artificielle et d'apprentissage automatique liées à la détection des visages, à la détection de points de repère et plus encore, et est capable de reconnaître plus de 52 gestes faciaux.

Pour le moment, le projet Gameface de Google Il est disponible sur Gitbuh afin que les développeurs puissent facilement l'implémenter dans leurs applications.

Nous ouvrons davantage de code source au Project Gameface pour aider les développeurs à créer des applications Android afin de rendre tous les appareils Android plus accessibles. Grâce à la caméra de l'appareil, (Project Gameface) suit parfaitement les expressions faciales et les mouvements de la tête, les traduisant en un contrôle intuitif et personnalisé.

Google.

Même s'il ne s'agit pas exactement de la même technologie que celle de Google, Manzana Il n'a pas non plus manqué l'occasion de présenter une nouvelle fonction dans iOS avec laquelle les utilisateurs pourront contrôler le système, ainsi que certaines applications, en utilisant uniquement leurs yeux.

Cette fonctionnalité d'accessibilité arrivera avec iOS 18 et iPadOS 18, et utilise la caméra frontale, comme l'a confirmé l'entreprise. « Avec Eye Tracking, les utilisateurs peuvent naviguer à travers les éléments d'une application et utiliser Permanence pour activer chaque élément, accédant à des fonctions supplémentaires telles que des boutons physiques, des balayages et d'autres gestes uniquement avec leurs yeux », disent-ils.