Как работает автоматическое определение песни при распознавании музыки Shazam?

Автоматическое определение песни в Shazam происходит с помощью нейросетей. brainskills.ru Звучание каждой композиции представляют в виде аудиоотпечатка — 2D-спектрограммы. brainskills.ru На неё влияют частота, интенсивность и время. brainskills.ru Для каждого трека такой отпечаток индивидуальный. brainskills.ru

Процесс распознавания песни включает несколько шагов: vc.ru

1. Расчёт спектрограммы аудиофайла. vc.ru Это график частоты относительно времени. vc.ru
2. Поиск пиков на спектрограмме. vc.ru Они отражают самые громкие частоты в аудиозаписи и помогают создать отпечаток. vc.ru
3. Хеширование этих пиков. vc.ru Пики составляют в пары для создания отпечатка. vc.ru
4. Сопоставление. vc.ru Отпечаток сопоставляется с тем, что уже есть в базе данных. vc.ru Алгоритм извлекает из базы данных все хеши, совпадающие с отпечатком рассматриваемого аудиофрагмента, и группирует их по песням, к которым они относятся. vc.ru

Shazam умеет игнорировать лишние «шумы», которые могут попадать на запись. brainskills.ru В качестве результата сервис выдаёт ту песню, в которой совпадений было больше всего. deep-review.com