Project Gameface klingt erst einmal nach einer schrägen Sache, ergibt bei genauerem Hinsehen aber total Sinn: Menschen mit Beeinträchtigungen werden so in die Lage versetzt, mit Gesten einen Cursor zu steuern und zu bedienen. Und das nicht nur beim Zocken.
Allerdings ist der Ausgangspunkt im Bereich Gaming zu finden, genauer in den USA. Seine ganze Geschichte und ein paar technische Details zum Project Gameface findest du im Video.
DATENSCHUTZHINWEIS: Dieses Video ist im erweiterten Datenschutzmodus von YouTube eingebunden. Durch den Klick auf das Wiedergabesymbol willige ich darin ein, dass eine Verbindung zu Google hergestellt wird und personenbezogene Daten an Google übertragen werden, die dieser Anbieter zur Analyse des Nutzerverhaltens oder zu Marketing-Zwecken nutzt. Weitere Infos hier.
Beim Project Gameface kommt Google MediaPipe für die Gesten und Bewegungserkennung über die Webcam zum Einsatz. Im Hintergrund arbeiten verschiedene AI-Programme, um die Muster zu erkennen und in Cursor-Bewegungen umzusetzen. Dazu werden mehr als 400 Messpunkte über das Gesicht gelegt und ausgewertet.
Ein Hochziehen der Augenbraue löst in diesem Fall einen Klick aus. Wie du im Video siehst, ist das System so genau, dass sich damit sogar schreiben lässt. Und natürlich auch zocken.
Alles in allem ist Gameface ein ziemlich beeindruckendes Projekt. Es ist open source und der Code ist auf GitHub abrufbar.
Gaming bei NBB im Shop
Quelle: Google