logo search
Шпора по ЕЯИС, 2ой семестр (Головня) [8282 вопросов]

70. Лингвистический процессор. Предварительная обработка текста. Пофразовая обработка текста.

В общем виде лингвистический процессор можно представить как совокупность трех основных блоков (узлов). На входе лингвистического процессора орфографический текст. Этот текст может быть получен различным образом: либо из какого-либо текстового файла, либо введен пользователем, либо сгенерирован естественно-языковой системой. Первый узел лингвистического процессора, как следует из его названия, осуществляет предварительную обработку текста, второй – фразовую (пофразовую) обработку, третий – пословную обработку текста. На выходе лингвистического процессора, как уже указывалось выше, получается размеченный фонемный текст.

Рис. Структура лингвистического процессора