Технология отслеживания лица в современных VR-устройствах включает в себя отслеживание глаз и губ. 4

Отслеживание глаз позволяет гарнитуре следить за взглядом пользователя и фиксировать движения век. 4 Это необходимо, чтобы игровые персонажи могли поддерживать зрительный контакт и повышать выразительность взаимодействия. 4

Отслеживание губ отслеживает движения рта и прилегающих мышц лица, что позволяет виртуальному аватару в реальном времени копировать речь и выражения пользователя. 4

Принцип работы отслеживания глаз заключается в постоянном измерении расстояния между центром зрачка и отражением роговицы. 3 Это отражение создаёт невидимый для человеческого глаза инфракрасный свет, а камеры записывают и отслеживают движения. 3 Алгоритмы компьютерного зрения способны по углу глаз определить, куда направлен взгляд. 3

Некоторые примеры использования технологии отслеживания лица в VR-устройствах:

• Обучение пилотов. 4 Во время сложных симуляций полёта инструкторы могут оценивать реакцию пилотов и уровень стресса, анализируя их выражения лица. 4
• Медицинское обучение. 4 Студенты могут практиковать взаимодействие с пациентами с помощью реалистичных аватаров, которые реагируют на их выражения и речь. 4