Для обработки закадрового перевода видео используются, например, такие технологии:

• Распознавание речи. 1 Если у видеоролика нет субтитров, речь превращают в текст. 1 Если субтитры есть, программа смотрит на их происхождение: загруженные вручную можно брать в работу, автоматически сгенерированные — игнорировать и выполнять собственное распознавание. 1
• Синтез речи. 13 Нейросети генерируют русскоязычный голосовой перевод и подгоняют его под скорость видео, чтобы не было рассинхронизации. 3
• Биометрия. 13 С её помощью определяют пол говорящего и выбирают подходящий вариант голоса. 3
• Машинный перевод. 1 Нейронная сеть убирает мусор, например вставки вроде «звучит музыка», которые могут встретиться в субтитрах, расставляет знаки препинания и распределяет слова по смысловым сегментам. 1
• Речевая компрессия. 1 Нейронная сеть сокращает паузы между словами и, если необходимо, немного ускоряет темп речи. 1