Определение части речи слова?

Question

[deleted-mezhevikin]

Какие есть алгоритмы определения части речи слова?


Кроме перечисления окончаний в голову ничего не пришло.

<br/>
 /*<br/>
 Группы окончаний:<br/>
 1. прилагательные<br/>
 2. причастие<br/>
 3. глогол<br/>
 4. существительное<br/>
 */<br/>
 <br/>
 $groups = array(<br/>
 1 =&gt; array ('ее','ие','ые','ое','ими','ыми','ей','ий','ый','ой','ем','им','ым','ом','его','ого','ему','ому','их','ых','ую','юю','ая','яя','ою','ею'),<br/>
 2 =&gt; array ('ивш','ывш','ующ','ем','нн','вш','ющ','щ'),<br/>
 3 =&gt; array ('ила','ыла','ена','ейте','уйте','ите','или','ыли','ей','уй','ил','ыл','им','ым','ен','ило','ыло','ено','ят','ует','уют','ит','ыт','ены','ить','ыть','ишь','ую','ю','ла','на','ете','йте','ли','й','л','ем','н','ло','но','ет','ют','ны','ть','ешь','нно'),<br/>
 4 =&gt; array ('а','ев','ов','ие','ье','е','иями','ями','ами','еи','ии','и','ией','ей','ой','ий','й','иям','ям','ием','ем','ам','ом','о','у','ах','иях','ях','ы','ь','ию','ью','ю','ия','ья','я'),);<br/>

Answer 1

[lugansk]

Смотреть на суффиксы/окончания — не надёжно, сравните:

скал (род. п.) — генерал — знал

Эти слова относятся, к глаголам или к существительным?

Думаю, варианта два: или подключить словарь со словоформами (напр. грамматический словарь Зализняка) и искать по нему (но омонимы и омофоны будут проблемой: стекло (сущ.) — стекло (гл., пр.в.) и т.д.), или же попытаться реализовать простейший синтаксический анализатор, но тут проблемой будет свободный порядок слов в русском.

В любом случае, если нужна точность, просто это реализовать не получится.

Comments

[lugansk]

*ненадёжно, «относятся к»…
Сорри, сонный уже

[Milfgard]

«Трамвай» — глагол повелительного наклонения!

[lugansk]

Трамвай, каравай! :)
Кровать (что делать?), кремний (какой?).

По теме вопроса попалось такое видео: Морфологический анализ в задачах информационного поиска И. Сегалович (WMV, 107 Мб)

[bask]

А ещё бывают омонимы. Скажем, широкораспространённые омонимы для предлогов «ДЛЯ» и «ПРИ» это глаголы «ДЛИТЬ» и «ПЕРЕТЬ».
Вот их я отсекаю с использованием статистики. В первую очередь обрабатываю «для» и «при» как предлоги и если уж ничего не получается, то перехожу к глаголам. Вообще, «при-переть» и «для-длить» можно отбросить, т.к. практически не используются в русском языке

Answer 2

[Milfgard]

Вот здесь ссылка на PDF про Мистем — company.yandex.ru/technology/mystem

Answer 3

[xmoonlight]

Вот я тут ответил...
Если что - готов проконсультировать в личке.

Answer 4

[lugansk]

Третий вариант (гибридный :)):
1) смотрим по словарю,
2) если слово не нашлось, пытаемся выкинуть приставку из начала слова и снова смотрим,
3) если нашлось несколько вариантов, делаем синтаксический анализ.

Answer 5

[gonzazoid]

ага… русский — это существительное или прилагательное?
Если нужен действительно надежный результат — придется заморочиться на контекст.

Comments

[deleted-mezhevikin]

точного наверное быть и не может

[Владимир Чернышев]

Отдельного слова точно нет, предложения — не всегда, нескольких реальных связанных преложений — сложно представить как не может быть.

Answer 6

[sielover]

делаешь, схож, крепеж, невтерпеж, рожь

Answer 7

[kmike]

язык программирования какой? в зависимости от языка и потребностей смотрите на phpmorphy, lemmatizer, pymorphy, mystem.

Comments

[deleted-mezhevikin]

php, сейчас разбираюсь с phpmorphy, спасибо за наводку

Answer 8

[Q2W]

На aot.ru есть некий лемматизер, который делает морфологический разбор.
ИМХО, самый адекватный и функциональный инструмент для подобного рода задач.

Answer 9

[ZaNaZR]

Я нечто похожее пишу, ток на языке с++, , еще дам вам подсказку по точности , можно использовать предлоги для более точного определения, вы не могли бы мне не дать свою контактную информацию для совместного рассмотрения данной проблемы, у меня к вам есть несколько вопросов, буду признателен если вы мне ответите.

Answer 10

[das07]

Посмотрите яндекс api - https://tech.yandex.ru/dictionary/
Вот пример использования - best-language.ru/tools/chast-rechi