Приложения для Android скоро позволят вам управлять курсором с помощью лица

Теперь разработчики могут интегрировать функцию специальных возможностей в свои приложения, позволяя пользователям управлять курсором с помощью жестов лица или движения головы. Например, они могут открыть рот, чтобы переместить курсор, или поднять брови, чтобы щелкнуть и перетащить курсор.

Проект Gameface был анонсирован во время настольной конференции Google I/O в прошлом году и использует камеру устройства и базу данных выражений лица из… API распознавания ориентиров лица MediaPipe Манипулировать индикатором.

«Посредством камеры устройства оно плавно отслеживает выражения лица и движения головы и переводит их в интуитивно понятный, персонализированный контроль», — пояснил Google в своем объявлении. «Теперь разработчики могут создавать приложения, в которых их пользователи могут настраивать свой опыт, настраивая выражение лица, размер жестов, скорость курсора и многое другое».

Хотя Gameface изначально был разработан для геймеров, Google заявляет, что также сотрудничает с всесторонний — Социальное предприятие в Индии, ориентированное на доступность — чтобы увидеть, как они могут распространить его на другие условия, такие как работа, школа и социальные ситуации.

Проект Gameface вдохновлен стримером видеоигр, страдающим параличом нижних конечностей. Лэнс Карр, страдающий мышечной атрофией. Карр сотрудничал с Google в этом проекте, стремясь создать менее дорогую и доступную альтернативу дорогим системам отслеживания движений головы.