Технология распознавания мелодий в музыкальных сервисах работает следующим образом: 23
- Захват и дискретизация звука. 5 Микрофон преобразует звуковые колебания в аналоговый электрический сигнал, который затем дискретизируется для дальнейшей обработки. 5
- Анализ частотных характеристик. 35 Алгоритм определяет, какие частоты (ноты) звучат наиболее громко в конкретный момент времени. 2 После обработки вместо массивной спектрограммы с большим количеством данных получается компактная и аккуратная картина — уникальный отпечаток конкретной композиции. 2
- Вычисление хэш-тегов. 35 Вместо конкретных частот с привязкой к определённому времени сохраняется информация о том, как связаны конкретные частоты между собой. 2 Например, что в определённой композиции звук на частоте 1600 Гц начинается спустя 3 секунды после звука на частоте 515 Гц. 2
- Сравнение хэш-тегов с теми, что хранятся в музыкальной базе данных. 35 Сервис передаёт эту информацию на сервер, который ищет в базе мелодию, соответствующую указанным характеристикам. 2 В качестве результата выдаётся песня, в которой совпадений было больше всего. 2
Также в музыкальных сервисах используется коллаборативная фильтрация. 1 Алгоритм находит похожих пользователей и предлагает им обменяться треками, которые они не слышали. 1