Компания Google дала доступ к коду разработчикам.
Исходный код проекта Project Gameface от компании Google стал доступен разработчикам Android. Эта инновационная разработка позволяет пользователям управлять курсором с помощью жестов и мимики лица, что особенно актуально для людей с ограниченными возможностями, сообщает Google. Возможности Project Gameface включают поднятие бровей для выбора объектов и открытие рта для перемещения курсора, благодаря технологии Face Landmarks Detection API от MediaPipe. Начальная стадия проекта предполагала использование только в играх, но теперь он находит применение в образовательных и рабочих целях.
Project Gameface, представленный Google на конференции I/O в 2023 году, изначально был задуман как инструмент, позволяющий управлять компьютером без использования рук. Основная функция устройства — распознавание мимики и движений головы с помощью встроенной камеры. На стадии анонса проект описывался как устройство, схожее с игровой мышью. Разработка была нацелена на создание более удобного и доступного способа управления для игр, однако потенциал применения оказался шире. Теперь, когда Google раскрыла код, разработчики могут интегрировать эту технологию в свои приложения. Это открывает новые возможности для создания приложений, где пользователи могут настраивать управление через мимику и жесты, что освобождает их от необходимости использовать руки.
Face Landmarks Detection API предоставляет базу данных с более чем 50 различными выражениями лица и движениями головы, которые используются для управления курсором. Это делает Project Gameface инструментом не только для игр, но и для других приложений, где важно удобство и доступность управления. Google видит потенциал в использовании этой технологии не только в развлекательной сфере, но и в образовательной, рабочей и социальной, что может значительно улучшить интерактивность и доступность цифровых ресурсов для широкого круга пользователей.