Как работает технология синтеза речи в современных модуляторах голоса?

Возможно, имелся в виду вокодер — устройство для синтеза речи. pop-music.ru В его работе используются два источника звука: оператор (исходный звуковой сигнал) и модулятор (сигнал с другими гармоническими характеристиками). pop-music.ru

Процесс происходит так: pop-music.ru

1. Сигнал модулятора проходит сквозь особый «банк фильтров», которые анализируют его и разделяют на частотные диапазоны. pop-music.ru
2. К каждой полосе звука применяется определённый фильтр, при этом точка среза каждого фильтра находится точно по центру каждого диапазона в сигнале модулятора. pop-music.ru
3. Подаваемый на модулятор сигнал-оператор проходит через фильтры. pop-music.ru
4. Вокодер регулирует (повышает или понижает) точку среза каждого фильтра в зависимости от гармоник и обертонов сигнала модулятора. pop-music.ru

Чаще всего в роли оператора используются синтезированные звуки, тогда как голос выступает в роли модулятора. pop-music.ru

Также существуют другие технологии синтеза речи, например:

• Конкатенативный синтез. sky.pro Основан на использовании записанных фрагментов человеческой речи. sky.pro Эти фрагменты, называемые юнитами, объединяются для создания слов и предложений. sky.pro
• Формантный синтез. sky.pro Использует математические модели для создания звуков. sky.pro В основе этой технологии лежат форманты — резонансные частоты, характерные для человеческого голоса. sky.pro
• Синтез на основе нейронных сетей. sky.pro Эти модели обучаются на больших объёмах данных и способны генерировать высококачественные и естественные голоса. sky.pro