Presentiamo il Progetto Gameface un mouse da gioco alimentato dall’IA senza l’uso delle mani.

Gameface un mouse da gioco alimentato dall'IA senza l'uso delle mani.

Project Gameface è un nuovo mouse da gioco open source senza mani che consente alle persone di controllare il cursore del computer utilizzando il movimento della testa e i gesti facciali. Le persone possono alzare le sopracciglia per cliccare e trascinare, o aprire la bocca per spostare il cursore, rendendo possibile per chiunque dedicarsi al gioco.

Il progetto è stato ispirato dalla storia di Lance Carr, uno streamer di videogiochi tetraplegico affetto da distrofia muscolare, una malattia progressiva che indebolisce i muscoli. Lance ha rifiutato di lasciare che le sue limitazioni fisiche gli impediscano di amare i videogiochi, quindi ha usato un mouse a inseguimento della testa per controllare il cursore. Nel 2021, la casa di Lance è andata a fuoco mentre stava giocando una notte – ed è stato tutto ripreso in diretta e guardato da giocatori di tutto il mondo. Lance ha perso tutti i suoi equipaggiamenti di gioco online nell’incendio, incluso il costoso mouse a inseguimento della testa, che è la tecnologia principale che gli ha permesso di giocare ai videogiochi su computer.

Dopo aver ascoltato la storia di Lance, sapevamo di dover aiutare. Quindi abbiamo lavorato con Lance per co-progettare Project Gameface, un mouse da gioco senza mani che utilizza le soluzioni open source di Google MediaPipe. I movimenti della testa e i gesti facciali catturati semplicemente da una webcam sono riconosciuti dai modelli di apprendimento automatico per spostare il cursore di conseguenza. Per adattarsi alle esigenze dei diversi utenti, abbiamo incorporato l’idea di una dimensione del gesto, che consente agli utenti di controllare quanto prominente deve essere il loro gesto per attivare un’azione del mouse.

Project Gameface è una nuova tecnologia promettente che ha il potenziale per rendere il gioco più accessibile. Il codice è open source e disponibile in anteprima oggi. Lo strumento è ancora in fase di sviluppo, ma siamo entusiasti del potenziale che ha di cambiare la vita delle persone perché è relativamente economico da costruire e mantenere. Se sei interessato a contribuire, migliorare o utilizzare questa tecnologia, visita il nostro repository GitHub.