Технология распознавания музыки в фильмах и сериалах, например, как она работает на «Кинопоиске», включает несколько этапов: 1

1. Разметка аудиодорожки фильма. 1 Выбираются все фрагменты, когда играет музыка. 1
2. Сопоставление фрагментов с базой Яндекс Музыки. 1 Находятся подходящие треки. 1
3. Проверка, нет ли ошибки в выборе трека. 1 Зрителю выдаётся информация о музыкальной композиции вместе с именем исполнителя и обложкой. 1

Чтобы автоматизировать процесс, написана специальная программа, которая собирает максимум доступной информации о фильме и музыке в нём, потом находит музыкальные фрагменты, распознаёт музыку и перепроверяет себя. 1

Если алгоритм не уверен, правильно ли он распознал трек, он присылает человеку запрос на проверку — кусочек аудиодорожки фильма и трек в Яндекс Музыке, который на него похож. 1 А человек отмечает, узнала ли программа мелодию. 1 В начале помощь тестировщика требовалась довольно часто, но алгоритм быстро учится, поэтому теперь только пятая часть фрагментов проходит дополнительную проверку. 1

Технология способна распознать как инструментальную музыку, так и песни разных исполнителей, которые играют в фильме или сериале фоном. 45