В компьютерной обработке текстов помогают языковые универсалии, которые представляют собой свойства, характеристики, отношения и процессы, присутствующие во всех или почти во всех языках мира. 1
Некоторые языковые универсалии, которые могут использоваться:
- Абсолютные универсалии. 1 Например, утверждение, что во всех языках существуют гласные и согласные звуки, люди говорят предложениями, во всех языках есть имена собственные. 1
- Статистические универсалии. 1 К ним относится, например, то, что почти во всех языках в местоимениях различается не менее двух чисел. 1
- Правила структуры фраз. 2 Это набор правил грамматики, по которым строится предложение. 2 На основе таких правил можно создавать дерево синтаксического анализа, чтобы классифицировать каждое слово в конкретном предложении и прийти к его общему значению. 2
- Система правил. 3 Например, слово «который» обычно связано с последним использованным существительным мужского рода. 3
Знание языковых универсалий помогает в компьютерной обработке дешифруемых текстов, а в ряде случаев может быть почти единственным инструментом для этого. 1