Как работает система распознавания музыки через звуковые волны?

Система распознавания музыки через звуковые волны работает по следующему принципу: из исходного звука извлекаются частотные характеристики, вычисляются хэш-теги и сравниваются с теми, что хранятся в музыкальной базе данных. habr.com

Некоторые этапы процесса:

1. Преобразование Фурье. vc.ru deep-review.com С помощью этого математического метода из сложной волны получают набор всех частот, из которых она состоит, а также амплитуду (громкость) каждой из них. deep-review.com
2. Построение спектрограммы. vc.ru deep-review.com Это график, который по оси Y показывает конкретную частоту, а по оси X — время. deep-review.com То есть можно видеть, какие частоты и насколько громко звучат в каждый момент времени. deep-review.com
3. Поиск ярких областей на спектрограмме. deep-review.com Алгоритм определяет, какие частоты (ноты) звучат наиболее громко в конкретный момент времени. deep-review.com
4. Создание уникального отпечатка композиции. deep-review.com Вместо конкретных частот с привязкой к определённому времени хранят информацию о том, как связаны конкретные частоты между собой. deep-review.com Например, сохраняют информацию о том, что в определённой композиции звук на частоте 1600 Гц начинается спустя 3 секунды после звука на частоте 515 Гц. deep-review.com
5. Сопоставление с базой данных. networkedlifeq21.fandom.com Звуковой отпечаток сопоставляется с предварительно сохранёнными звуковыми отпечатками в базе данных. networkedlifeq21.fandom.com После успешного сопоставления отображается информация о треке, такая как название трека, альбом, тексты песен, исполнитель, жанр и т. д.. networkedlifeq21.fandom.com