Процесс распознавания речи в слуховом анализаторе включает несколько этапов: 2
- Обработка сигнала звуковой волной. 2 Ухо преобразует сигнал в механическую вибрацию барабанной перепонки, а затем отображает эту вибрацию в последовательность импульсов, передаваемых слуховым нервом. 2
- Определение ориентиров. 4 Входящий акустический сигнал сначала обрабатывается для определения ориентиров — особых спектральных событий в сигнале. 4 Например, гласные обычно отмечаются более высокой частотой первой форманты, согласные можно определить как разрывы в сигнале и более низкие амплитуды в нижней и средней областях спектра. 4
- Извлечение акустических сигналов. 4 Ориентиры анализируются для определения определённых артикуляционных событий (жестов), которые с ними связаны. 4 Затем из сигнала вблизи ориентиров извлекаются акустические сигналы посредством мысленного измерения определённых параметров, таких как частоты спектральных пиков, амплитуды в низкочастотной области или синхронизация. 4
- Выделение полезной информации. 2 Этот набор признаков подаётся в мозг человека в качестве мгновенного изображения сигнала, где с помощью сложной нейронной сети происходит выделение полезной информации из полученного сигнала. 2
Вся информация с левого и правого уха сначала попадает в оба полушария мозга, но обрабатывается звуки по отдельности в специальных зонах коры. 1 Левое полушарие мозга отвечает за распознавание фонем, а правое полушарие в речевом слухе участвует — анализирует разные голоса и интонации. 1