Как ученые определяют подлинность аудиозаписей, созданных с помощью искусственного интеллекта?

Учёные используют разные подходы для определения подлинности аудиозаписей, созданных с помощью искусственного интеллекта (дипфейков). www.ixbt.com Некоторые из них:

• Изучение воспринимаемых особенностей или паттернов. www.ixbt.com Например, реальные человеческие голоса часто имеют больше пауз и различаются по громкости на протяжении всего клипа, в то время как клонированные голоса более ровные и однообразные. www.ixbt.com Этот метод легко понять, но он может давать менее точные результаты. www.ixbt.com
• Спектральный анализ. www.ixbt.com Специальная программа извлекает более 6000 характеристик из аудиоволн, таких как среднее, стандартное отклонение, коэффициенты регрессии и т. д.. www.ixbt.com Затем программа выбирает 20 самых важных характеристик и сравнивает их с другими аудиоклипами. www.ixbt.com Этот метод даёт более точные результаты, но требует больше вычислительных ресурсов. www.ixbt.com
• Использование модели глубокого обучения. www.ixbt.com Модель принимает на вход сырое аудио и обрабатывает его, извлекая многомерные представления, называемые вложениями. www.ixbt.com Эти вложения используются для различения реального и «синтетического» аудио. www.ixbt.com Этот метод показал самые высокие показатели точности и даже достигал нулевой ошибки в лабораторных условиях. www.ixbt.com Однако этот метод сложнее понять и объяснить, так как он основан на сложных математических операциях. www.ixbt.com

Также учёные обращают внимание на анализ посторонних и неестественных шумов, которые могут присутствовать в голосовых подделках. dzen.ru

Определить дипфейк без специалиста сложно, так как современные технологии позволяют создавать очень реалистичные подделки. rtmtech.ru