Какие существуют способы реализации системы распознавания эмоций в виртуальной реальности?

Некоторые способы реализации системы распознавания эмоций в виртуальной реальности:

• Использование датчиков, измеряющих электрическую активность мышц лица. 1 Например, в проекте MindMaze Mask датчики расположены внутри шлема. 1 На основе показателей датчиков алгоритм предсказывает мимику пользователя для качественной отрисовки аватара. 1
• Добавление камеры, регистрирующей движения нижней половины лица. 1 Стартап Veeso дополнил очки виртуальной реальности такой камерой. 1 Совмещая изображения нижней половины лица и области глаз, система распознаёт мимику всего лица целиком для перенесения её на виртуальный аватар. 1
• Использование алгоритмов на базе свёрточной нейросети. 12 Например, команда из Технологического Института Джорджии в партнёрстве с Google разработала технологию распознавания эмоций человека в очках виртуальной реальности без дополнительных девайсов. 1 Алгоритм распознаёт лицевые экспрессии в среднем в 74% случаев. 1
• Применение датчиков для отслеживания физиологических изменений. 4 Например, учёные из Университета Бата использовали комбинацию датчиков для определения размера зрачков, выражения лица, частоты сердечных сокращений, уровня потоотделения, воспаления кожи и электродермальной активности. 4
• Использование машинного обучения и методов глубокого обучения. 5 В исследованиях предлагают подход для распознавания эмоций в виртуальной реальности с использованием отслеживания глаз и физиологических данных. 5