Как работает система распознавания эмоционального состояния в современных чат-ботах?

Система распознавания эмоционального состояния в современных чат-ботах работает на основе технологий машинного обучения, нейронных сетей и обработки естественного языка. trends.rbc.ru

Процесс включает несколько этапов: vc.ru

1. Распознавание эмоций по тексту. vc.ru Ответы клиентов в разговоре с помощью сервиса распознавания речи переводятся в текст. vc.ru Затем этот текст отправляется в модуль обработки и понимания естественного языка, в составе которого работает модуль распознавания эмоций по тексту. vc.ru
2. Распознавание эмоций по речи/голосу. vc.ru Поток с речью клиента анализируется детектором голосовой активности. vc.ru Как только детектор определил наличие голоса, фрагмент речи записывается до момента, пока не наступит тишина. vc.ru Затем этот фрагмент отправляется в модуль распознавания эмоций человека по его речи. vc.ru

Для создания набора датасетов или моделей, составляющих основу эмоционального интеллекта бота, занимаются разметчики-лингвисты. hightech.fm Они прослушивают множество диалогов, из которых выделяют эпизоды с ярко выраженной эмоциональной окраской, категоризируют их и заносят в соответствующую базу. hightech.fm

После обучения система может классифицировать новые данные в режиме реального времени, определяя, какие эмоции испытывает человек. trends.rbc.ru