Google представляет Инновационный контроль для геймеров: проект Gameface теперь с открытым исходным кодом
Важный шаг для игрового сообщества и разработчиков сделан компанией Google, которая предоставила общественности доступ к исходному коду проекта Gameface. Эта передовая технология позволяет игрокам управлять виртуальной «мышью» с помощью выражений лица и движений головы. Теперь код доступен в открытом исходном виде для разработчиков Android, что открывает новые возможности для интеграции в приложения.
Благодаря этому прогрессу разработчики могут улучшить свои приложения, включив эту функцию доступности. Пользователи получат возможность навигации и взаимодействия со своими устройствами без использования рук, применяя простые жесты, такие как открытие рта для перемещения курсора или поднятие бровей для клика и перетаскивания элементов на экране.
Изначально представленный на конференции Google I/O для использования на настольных компьютерах, проект Gameface использует камеру устройства в сочетании с API для обнаружения ориентиров лица MediaPipe для интерпретации выражений лица в движения курсора. В Google стремятся дать пользователям возможность персонализировать свой опыт, настраивая распознавание выражения лица, чувствительность жестов, скорость курсора и многое другое.
В объявлении Google подчеркивается бесшовная природа технологии, которая отслеживает движения лица и головы, обеспечивая интуитивно понятную систему контроля. Это новшество не только для игр; оно имеет потенциал применения в различных сферах, включая рабочие места, образовательные учреждения и социальные взаимодействия.
Интересно, что вдохновением для проекта Gameface послужил Лэнс Карр, квадриплегик-стример видеоигр с мышечной дистрофией. Сотрудничество Карра с Google было направлено на создание доступной и экономически выгодной альтернативы традиционно дорогим системам отслеживания движений головы. Google также сотрудничает с Incluzza, индийским социальным предприятием, специализирующимся на доступности, для изучения дальнейших применений этой технологии.