Какие существуют современные технологии генерации искусственного звука морских существ?

Одна из современных технологий генерации искусственного звука морских существ — использование нейросети. news.rambler.ru www.pravda.ru

Например, учёные из СПбГЭТУ «ЛЭТИ» разработали метод генерации синтетических звуков кашалотов. news.rambler.ru www.pravda.ru Для этого «песни» этих животных преобразовали в спектрограммы — визуальное представление звука. www.pravda.ru Затем, применив алгоритмы машинного обучения, сгенерировали новые звуковые данные. www.pravda.ru

Процесс включает следующие этапы: news.rambler.ru

1. Обработка записей. www.ferra.ru Учёные меняли тембр, тон, добавляли шум, ускоряли и замедляли записи, чтобы сделать набор данных более разнообразным. www.ferra.ru
2. Преобразование звуков в спектрограммы. news.rambler.ru www.ferra.ru Это как фотография звука, где видны его частоты по времени. www.ferra.ru
3. Работа со спектрограммами. www.ferra.ru Учёные резали спектрограммы на кусочки, перемешивали их и заново собирали. www.ferra.ru Это помогло получить новые звуки, которые похожи на оригиналы, но являются полностью синтетическими. www.ferra.ru
4. Использование модифицированной нейросети. www.ferra.ru Для генерации ещё более сложных сигналов использовали StyleGAN2-ADA. www.ferra.ru

Такая технология имеет потенциал для изучения поведения морских млекопитающих, а также для создания новых методов подводной связи, использующих акустические сигналы. www.pravda.ru