Как работает технология отслеживания лица в современных VR-устройствах?

Технология отслеживания лица в современных VR-устройствах включает в себя отслеживание глаз и губ. blog.vive.com

Отслеживание глаз позволяет гарнитуре следить за взглядом пользователя и фиксировать движения век. blog.vive.com Это необходимо, чтобы игровые персонажи могли поддерживать зрительный контакт и повышать выразительность взаимодействия. blog.vive.com

Отслеживание губ отслеживает движения рта и прилегающих мышц лица, что позволяет виртуальному аватару в реальном времени копировать речь и выражения пользователя. blog.vive.com

Принцип работы отслеживания глаз заключается в постоянном измерении расстояния между центром зрачка и отражением роговицы. imotions.com Это отражение создаёт невидимый для человеческого глаза инфракрасный свет, а камеры записывают и отслеживают движения. imotions.com Алгоритмы компьютерного зрения способны по углу глаз определить, куда направлен взгляд. imotions.com

Некоторые примеры использования технологии отслеживания лица в VR-устройствах:

• Обучение пилотов. blog.vive.com Во время сложных симуляций полёта инструкторы могут оценивать реакцию пилотов и уровень стресса, анализируя их выражения лица. blog.vive.com
• Медицинское обучение. blog.vive.com Студенты могут практиковать взаимодействие с пациентами с помощью реалистичных аватаров, которые реагируют на их выражения и речь. blog.vive.com