Некоторые методы, которые используются для автоматического анализа структуры текста:

• Графематический анализ (токенизация). 3 Выделение из массива данных предложений и слов (токенов), а также границ предложений. 3
• Морфологический анализ. 3 Выделение грамматической основы слова, определение частей речи, приведение слова к словарной форме. 3
• Синтаксический анализ. 3 Выявление синтаксических связей между словами и предложениями, построение синтаксической структуры предложения. 3
• Семантический анализ. 3 Выявление семантических связей между словами и синтаксическими группами, извлечение семантических отношений. 3
• Тематическое моделирование. 4 Подход анализа текстовых данных, направленный на выявление скрытых тематических структур в коллекции документов. 4 Позволяет автоматически определить, какие темы присутствуют в наборе текстов, и какие слова характеризуют каждую тему. 4
• Семантико-синтаксический анализ. 5 Проводится с целью получения формализованного представления структуры текстов — выделения в них смысловых единиц и установления связей между ними. 5
• Концептуальный анализ. 5 Предназначен для выявления наименований понятий в тексте. 5 Базируется на результатах семантико-синтаксического анализа и использовании эталонного словаря наименований понятий предметной области, к которой принадлежит анализируемый текст. 5