Какую систему использовать для анализа переписки?

Question

[Алексей Коваль]

Какую систему использовать для задачи обработки данных?
Имеется большой объём входных данных от разных пользователей.
Необходимо отрабатывать эту информацию по различным критериям, к котором можно привязать поиск по синонимам.
Например:
В туристическом сообществе люди пишут о путешествиях в различные города. Нужно структурировать информацию - какой пользователь где путешествовал и понравилось ли ему.

Comments

[Максим]

Задача поставлена размыто, но Apache Solr неплохо справляется с такого рода данными

[Алексей Коваль]

Максим, ее допиливать надо или она из коробки умеет?)

[Максим]

Алексей Коваль, она умеет из коробки, осталось понять что Вам надо ;-)

Answer 1

[Сергей Горностаев]

Готовых бесплатных решений вы вряд ли найдёте. Соответственно надо писать своё. Как писать - зависит от того какие именно объёмы данных надо обрабатывать, должна ли быть это пакетная обработка или потоковая, если второе, то какой уровень латентности требуется, какой именно подход к анализу текста вы собираетесь применять и т.д. и т.п.