Project Gameface — O Controlador de Jogos por Gestos Faciais e Código Aberto da Google, Co-Criado com Lance Carr

O Project Gameface é uma aplicação gratuita e de código aberto que permite controlar o cursor de um computador através de movimentos da cabeça e gestos faciais captados por uma webcam comum, sem necessidade de hardware adicional.

A Google desenvolveu a ferramenta com Lance Carr, jogador e streamer tetraplégico que vive com distrofia muscular e que dependia anteriormente de um rato de rastreamento de cabeça dedicado e dispendioso — equipamento que perdeu por completo num incêndio doméstico. Trabalhando com Carr como parceiro de design, a equipa da Google utilizou o modelo MediaPipe Face Landmarker, que deteta 52 'blendshapes' faciais distintos (como levantar uma sobrancelha ou abrir a boca), e mapeou um subconjunto configurável destes gestos para cliques, arrastos e movimento do cursor do rato.

A Google apresentou o Project Gameface na I/O 2023 para Windows e disponibilizou o código em código aberto no GitHub nesse mesmo ano, convidando programadores a expandi-lo. Na I/O 2024, a Google anunciou uma versão para Android e disponibilizou o código adicional necessário para que os programadores integrem controlo sem mãos, baseado em câmara, diretamente em jogos e aplicações Android.

Como ressalva sobre a evidência: a Google não publicou dados de utilização ou adoção, estudos de resultados controlados, nem investigação independente de eficácia para o Project Gameface, pelo que o seu impacto está documentado sobretudo através do caso de origem, demonstrações de programadores e cobertura da imprensa, e não através de resultados medidos.