Некоторые этапы развития технологий автоматического реферирования:
- Начало исследований. vital.lib.tsu.ru Первые попытки решать задачи обработки естественного языка с помощью компьютеров начались, когда начали активно использоваться ЭВМ первого поколения. vital.lib.tsu.ru Одна из первых задач по обработке естественного языка с помощью компьютеров — машинный перевод. vital.lib.tsu.ru Почти одновременно с этим начались исследования по использованию ЭВМ для автоматического реферирования текстов. vital.lib.tsu.ru
- Разработка первых подходов. vital.lib.tsu.ru В конце 50-х годов ХХ века Лун разработал подходы к решению проблемы автоматического реферирования. vital.lib.tsu.ru В 1969 году их дополнил Эдмундсон. vital.lib.tsu.ru Лун и Эдмундсон предложили генерировать рефераты из фрагментов, характеристиками которых была частота встречаемости, наличие слов из заголовка и слов-маркеров, а также расположение предложения в тексте. vital.lib.tsu.ru Однако их подход не учитывал структуру исходного документа. vital.lib.tsu.ru
- Продолжение изучения вопроса. vital.lib.tsu.ru В 1997 году Д. Марк предложил подход с использованием деревьев разбора RST, построенных на основе риторического статуса фрагментов. vital.lib.tsu.ru Такой подход позволяет гибко настраивать параметры аннотации, но он очень дорог с точки зрения вычислительных ресурсов, поэтому может быть неэффективным для больших объёмов информации. vital.lib.tsu.ru
- Появление более продвинутых подходов. vital.lib.tsu.ru Позже были изобретены, например, использование наивного байесовского классификатора для разделения фрагментов текста на значимые и незначимые, а также алгоритм Grasshopper, основанный на теории поглощающих случайных блужданий на графе. vital.lib.tsu.ru
- Использование методов глубокого обучения. vital.lib.tsu.ru Логичным продолжением двух классических подходов стал подход с использованием методов глубокого обучения. vital.lib.tsu.ru
Первая работа по автоматическому реферированию была сделана американским учёным Г. П. Луном в 1958 году на материале английского языка. ru.wikipedia.org ru.ruwiki.ru В СССР первооткрывателями в области автоматического реферирования стали В. Е. Берзон, И. П. Cевбо, Э. Ф. Скороходько, Д. Г. Лахути, Р. Г. Пиотровский и другие. ru.wikipedia.org