Как работает генератор случайных слов с точки зрения компьютерной лингвистики?

С точки зрения компьютерной лингвистики генератор случайных слов может работать на основе разных подходов, например:

• Генерация букв согласно частоте их использования. 22century.ru Например, буква «т» встречается в словах чаще, чем «ш». 22century.ru Однако такой подход может приводить к нечитаемым словам. 22century.ru
• Использование словаря, в котором для каждого слова записано, какие слова могут за ним следовать. tproger.ru Также каждое слово характеризуется числом его появлений в тексте. tproger.ru На основе этих данных генератор выбирает следующее слово, основываясь только на знаниях о текущем слове, все остальные слова не учитываются. tproger.ru
• Генерация слов на основе морфем. www.cyberforum.ru Пользователь вводит префиксы, корни и суффиксы, а программа вычисляет все возможные сочетания морфем и сохраняет их в текстовый файл. www.cyberforum.ru
• Поиск слов, которые начинаются на те же буквы, которыми заканчивается другое слово. thecode.media Например, если взять слово «программа», которое заканчивается на «грамма», и слово «грамматика», которое начинается на эти же буквы, то получится «программатика». thecode.media
• Использование генеративных нейронных сетей. habr.com Такие сети способны решать множество задач по обработке естественного языка (NLP), в том числе генерировать слова. habr.com Нейросеть обучается на уровне символов и пытается составлять слова из всех присутствующих символов. habr.com