Некоторые способы реализации системы распознавания эмоций в виртуальной реальности:
Использование датчиков, измеряющих электрическую активность мышц лица. habr.com Например, в проекте MindMaze Mask датчики расположены внутри шлема. habr.com На основе показателей датчиков алгоритм предсказывает мимику пользователя для качественной отрисовки аватара. habr.com
Добавление камеры, регистрирующей движения нижней половины лица. habr.com Стартап Veeso дополнил очки виртуальной реальности такой камерой. habr.com Совмещая изображения нижней половины лица и области глаз, система распознаёт мимику всего лица целиком для перенесения её на виртуальный аватар. habr.com
Использование алгоритмов на базе свёрточной нейросети. habr.com cyberleninka.ru Например, команда из Технологического Института Джорджии в партнёрстве с Google разработала технологию распознавания эмоций человека в очках виртуальной реальности без дополнительных девайсов. habr.com Алгоритм распознаёт лицевые экспрессии в среднем в 74% случаев. habr.com
Применение датчиков для отслеживания физиологических изменений. incrussia.ru Например, учёные из Университета Бата использовали комбинацию датчиков для определения размера зрачков, выражения лица, частоты сердечных сокращений, уровня потоотделения, воспаления кожи и электродермальной активности. incrussia.ru
Использование машинного обучения и методов глубокого обучения. www.frontiersin.org В исследованиях предлагают подход для распознавания эмоций в виртуальной реальности с использованием отслеживания глаз и физиологических данных. www.frontiersin.org
Примеры полезных ответов Поиска с Алисой на вопросы из разных сфер. Вопросы сгенерированы нейросетью YandexGPT для актуальных тем, которые определяются на базе обобщённых запросов к Поиску с Алисой.