Некоторые методы распознавания голосовых подделок (дипфейков) в индустрии развлечений:

• Распознавание по звукам. 1 Один из методов — поиск лишних звуковых элементов в поддельных записях. 1 Например, алгоритм Pindrop анализирует от 8 тыс. до 50 тыс. выборок данных в каждой секунде записи и выявляет артефакты звучания, которых в дипфейках быть не должно. 1
• Прогнозирование вероятностей. 1 Инструмент Resemblyzer от американской Resemble AI использует искусственный интеллект и машинное обучение для обнаружения дипфейков, получая высококачественные представления образцов голоса. 1
• Выявление по частотам голоса. 1 Учёные Джоэл Франк и Леа Шонхерр разработали алгоритм, который позволяет отличить реальный голос человека от дипфейка по частоте. 1 Для этого они сравнили распределение частот в реальных и поддельных аудиозаписях. 1
• Выявление дипфейков с помощью математики. 1 Международная группа исследователей представила метод, который анализирует несколько секунд звука, чтобы определить, является ли он подлинной человеческой речью или дипфейком. 1
• Спектральный анализ. 5 Для этого используют специальную программу, которая извлекает более 6 000 характеристик из аудиоволн, таких как среднее, стандартное отклонение, коэффициенты регрессии и т. д.. 5 Затем программа выбирает 20 самых важных характеристик и сравнивает их с другими аудиоклипами. 5
• Использование модели глубокого обучения. 5 Этот метод принимает на вход сырое аудио и обрабатывает его, извлекая многомерные представления, называемые вложениями. 5 Эти вложения используются для различения реального и «синтетического» аудио. 5