Как можно проанализировать много вакансий?

Question

[alexmikh]

Имеется:
- Описание 2000 вакансий в относительно свободном формате,
- Тематика вакансий неизвестна

Задача:
- Получить общие требования для этих вакансий. В идеале в виде списка типо:
Java - 30 вакансий
Hadoop - 10 вакансий
Организованность - 30 вакансий
Математическое образование - 50 вакансий

Такого списка я заранее не имею, его надо получить из данных вакансий.

Вопрос:
- Есть ли какие то алгоритмы, библиотеки чтобы понять что общего у этих вакансий, какие вещи и как часто встречаются.

Answer 1

[alexmikh]

Я в итоге решал задачу библиотекой NLTK. Подробно тут и в моей статье тут :)

Answer 2

[Dimonchik]

томита
gensim