Нужен ли мне NLP?

Question

[beduin01]

Язык не критичен. Проблема звучит следующим образом. Есть много кусков текста вида:
Постановление отменено, Отказано, Не верно поданы документы, Не верный номер и тд

Кусков много и к словарю их свести нельзя. Матчить по паттерну "отмен" и "не[подх | верно | корр]" мне кажется не лучшим вариантом.

Мне нужно по кускам понять, что идет какое-то отрицание и выставить флаг False.

Есть ли еще какие-то варианты? Нужно ли тут NLP в чистом виде? Или есть еще средства?

Comments

[Viktor T2]

Незнаю, так себе идея конечно, но можно куски
проиндексировать в полнотекстовый поиск,
а затем проставлять флаги по совпадениям фраз:
"Постановление отменено", "Отказано", "Не верно поданы документы", "Не верный номер"

Answer 1

[xmoonlight]

Если что-то указано, то явно должен быть статус у документа.
Если есть статус - можно сделать "вычитание": "не положительный" - значит "отрицательный".
Осталось найти все "положительные" (утверждённые) статусы.

Comments

[beduin01]

Увы в положительном может в конце быть написано: "... отклонено"

[xmoonlight]

beduin01, если всего 2 критерия - это не проблема.

Answer 2

[Сергей]

Не знаю, можно ли наивный байесовский классификатор называть NLP.
Но скормите такого рода тексты ему, пусть обучится.

Пример кода: https://github.com/loguntsov/bayes

можете поиграться на ваших данных.