Présentation du projet Gameface une souris de jeu sans les mains, alimentée par l’IA.

Gameface une souris de jeu alimentée par l'IA, sans les mains.

Project Gameface est une nouvelle souris de jeu open source sans les mains qui permet aux gens de contrôler le curseur d’un ordinateur en utilisant les mouvements de leur tête et les gestes de leur visage. Les gens peuvent lever leurs sourcils pour cliquer et faire glisser, ou ouvrir leur bouche pour déplacer le curseur, ce qui rend possible pour tout le monde de poursuivre leur passion pour les jeux vidéo.

Le projet a été inspiré par l’histoire de Lance Carr, un vidéo blogueur de jeux vidéo quadriplégique qui vit avec une dystrophie musculaire, une maladie progressive qui affaiblit les muscles. Lance a refusé de laisser ses limitations physiques l’empêcher de jouer à des jeux vidéo, il a donc utilisé une souris à suivi de tête pour contrôler son curseur. En 2021, la maison de Lance a pris feu alors qu’il jouait un soir – et tout a été capturé en direct et regardé par des joueurs du monde entier. Lance a perdu tous ses équipements de jeux en ligne dans l’incendie, y compris la souris à suivi de tête coûteuse, qui est la technologie principale qui lui a permis de jouer à des jeux sur ordinateur.

Après avoir entendu l’histoire de Lance, nous savions que nous devions aider. Nous avons donc travaillé avec Lance pour co-concevoir Project Gameface, une souris de jeu sans les mains qui utilise les solutions open source de Google MediaPipe. Les mouvements de la tête et les gestes du visage capturés simplement à partir d’une webcam sont reconnus par des modèles d’apprentissage automatique pour déplacer le curseur en conséquence. Pour s’adapter aux besoins des différents utilisateurs, nous avons incorporé l’idée d’une taille de geste, qui permet aux utilisateurs de contrôler la façon dont leur geste doit être marqué pour déclencher une action de la souris.

• 100 choses que nous avons annoncées à I/O 2023
• Un programme d’action pour un progrès de l’IA responsable Opportunité, Responsabilité, Sécurité.
• Aider plus de personnes à rester en sécurité grâce à la prévision des inondations.

Project Gameface est une nouvelle technologie prometteuse qui a le potentiel de rendre les jeux vidéo plus accessibles. Le code est open source et disponible en prévisualisation dès aujourd’hui. L’outil est encore en développement, mais nous sommes enthousiastes quant à son potentiel à changer la vie des gens car il est relativement peu coûteux à construire et à entretenir. Si vous êtes intéressé à contribuer, à améliorer ou à utiliser cette technologie, visitez notre dépôt GitHub.

We will continue to update IPGirl; if you have any questions or suggestions, please contact us!