Как работает распознавание музыки из видео через Google Assistant?

Распознавание музыки из видео через Google Assistant работает следующим образом: www.nur.kz

1. Нажмите и удерживайте кнопку главного экрана или скажите «Окей, Google». www.nur.kz
2. Спросите помощника «Что это за песня?». www.nur.kz
3. Включите песню, напойте или просвистите мелодию. www.nur.kz Достаточно 10–15 секунд отрывка. habr.com
4. Модель машинного обучения преобразует звук в цифровую последовательность, представляющую мелодию песни. habr.com
5. Голосовой помощник подберёт несколько вариантов на выбор. habr.com Каждый из них будет содержать данные о треке, исполнителе, видеоклипах и другие. habr.com

Кроме того, Google подберёт каверы и другие варианты оригинальной композиции, если они были проиндексированы поисковыми ботами. habr.com