Вы знаете Стивена Хокинга, который «печатал» благодаря движению глаз на виртуальной клавиатуре? Что ж, Google придумал игровая мышь с искусственным интеллектом который позволяет вам делать это и многое другое. Проект был показал, по случаю Google I/O 2023, где Сложите пиксель Google и Google Pixel 7a. Давайте посмотрим детали вместе.
Google Project Gameface — это игровая мышь, которую можно использовать без помощи рук: она немного похожа на кино, мы управляем ею благодаря мимическим жестам.
Google продолжает исследовать возможности искусственного интеллекта, демонстрируя интересные приложения и технологии. Одной из последних разработок исследовательского гиганта стал проект Project Gameface — игровая мышь с поддержкой управления без помощи рук, оснащенная искусственным интеллектом. Контроллер основан на искусственном интеллекте и взаимодействие с «устройством» происходит благодаря веб-камере. Он сканирует лицо пользователя, отслеживая движения головы и выражение лица. А затем полученные данные конвертируются в перемещения персонажей в игре.
Программное обеспечение Gameface позволяет вам настроить привязки клавиш и мыши для определенных жестов, включая улыбку, взгляд в сторону или поднятие брови. Например, открытие рта можно настроить на щелчок левой кнопкой мыши. В то же время возможно указать уровень интенсивности конкретного жеста при котором настроенная команда будет работать.
Project Gameface использует MediaPipe с открытым исходным кодом от Google, который сочетает в себе различные модели искусственного интеллекта. Специалист по искусственному интеллекту Google Лоуренс Морони отмечает, что результатом работы ИИ является сетка из 468 точек на лице, которые затем преобразуются в данные телеметрии, такие как движение мыши или клики.
Project Gameface — это многообещающая новая технология, которая может сделать игры более доступными. код с открытым исходным кодом и доступен в предварительной версии сегодня. Инструмент все еще находится в стадии разработки, но если вы разработчик, вы можете внести свой вклад, улучшить или использовать эту технологию через Репозиторий GitHub.