Я хочу сделать робота(программу типа ассистента куда вбиваешь текст) говорящего с помощью музыкальных инструментов. Какие программы использовать и как это вообще сделать?

Для создания робота, говорящего с помощью музыкальных инструментов, можно использовать следующие программы и подходы:

1. Библиотеки для синтеза речи. yandex.ru Их множество, например, Speechify, PlayHT или SpeechGen.io. filmora.wondershare.com.ru Эти инструменты преобразуют текст в речь с помощью искусственного интеллекта. filmora.wondershare.com.ru
2. Поиск закономерностей в звуках произносимых букв. yandex.ru Например, можно перевести аудиофайлы текста в MIDI-файлы. yandex.ru Затем по найденной закономерности синтезировать MIDI-мелодию текста речи робота и воспроизводить её на нужном инструменте. yandex.ru

Для программирования голосового робота можно воспользоваться, например, такими решениями:

• S.T.A.R.K.. proglib.io Фреймворк для создания голосового ассистента на Python. proglib.io Для работы с речью в нём используются реализации Vosk для распознавания речи и Silero для синтеза речи. proglib.io
• Библиотека pyttsx3. www.geeksforgeeks.org dzen.ru Кроссплатформенная библиотека преобразования текста в речь, которая работает в автономном режиме. www.geeksforgeeks.org

Для создания умного голосового робота, который будет общаться с клиентами, лучше обратиться в компании, которые занимаются разработкой голосовых роботов. tomoru.ru