Как работает автоматическая идентификация вокальных партий?

Автоматическая идентификация вокальных партий работает на основе машинного обучения и распознавания паттернов с использованием искусственного интеллекта. vc.ru

Процесс включает несколько этапов: yandex.ru

1. Приём входных данных в цифровом виде, которые характеризуют воспроизводимое музыкальное произведение. yandex.ru
2. Разбиение цифрового аудиопотока на набор фрагментов фиксированной длительности. yandex.ru
3. Преобразование набора фрагментов в набор частотных спектров с помощью быстрого преобразования Фурье. yandex.ru
4. Преобразование набора частотных спектров в набор идентификационных показателей. yandex.ru
5. Сравнение идентификационных показателей, которые характеризуют воспроизводимое музыкальное произведение, и показатели, характеризующие оригинальные музыкальные произведения. yandex.ru
6. Вывод о том, что имеет место воспроизведение определённого музыкального произведения. yandex.ru

Алгоритмы искусственного интеллекта постоянно обучаются и совершенствуются на основе больших массивов данных, что повышает точность сопоставления аудио и уменьшает количество ложных срабатываний. vc.ru

Некоторые сервисы, которые используют ИИ для распознавания музыки: Shazam, SoundHound, Google Assistant и Siri. vc.ru