Как сделать быстрый полнотекстовый поиск?

Question

[wbb]

Для проекта, некоего аналога stackoverflow.com, только по мобильной тематике — http://www.uagadget.com требуется реализовать полнотекстовый поиск по вопросам и ответам.

Мощности сервера на данный момент не велики, как это часто бывает у всех стартапов. Поэтому хочу узнать у вас, какой движок для полнотекстового поиска лучше всего использовать? Необходимо чтобы поиск был быстрым и не сильно требовательным к ресурсам(в частности к оперативной памяти). Поиск родными средствами PostgreSQL думаю может быть довольно «грузовым».

Ваши мнения?

Comments

[wbb]

На текущий момент планирует тестировать связку PostgreSQL + Sphinx. Спасибо за советы.

Answer 1

[Antalhen]

Как вариант рассмотрите Sphinx. Быстрое построение индекса, быстрый поиск.
Еще: habrahabr.ru/hub/sphinx/posts/
А также сравнение движков полнотекстового поиска.

Answer 2

[Sliver]

Посмотри Elastic Search

Answer 3

[hell]

Вообще говоря, встроенный в PostgreSQL полнотекстовый поиск работает весьма шустро. То еть, тормозов при граничных условиях поиска по 1000000 документам (объем каждого — от 1000 до 300000 символов, средний объем документа — 2000 символов) вообще говоря не наблюдается. Во всяком случае, на выделенном сервере (в данном конкретном случае используется Hetzner с 24Gb памяти, из них PostgreSQL кушает примерно четверть, версия PostgreSQL — 9.2 — на более ранних версиях результаты были немного другими.)
Я бы рекомендовал попробовать протестировать вашу текущую конфигурацию на производительность с разными движками. И, в случае использования постгреса, не использовать подсветку результатов.

Answer 4

[WieFix]

Sphinx, Lucene?

Comments

[EjikVTumane]

Только я бы вместо Lucene предложил смотреть на Solr (который как раз на базе Lucene).

[pav]

Еще есть elasticsearch но мне Solr понравился больше

Answer 5

[pav]

Посмотрите в сторону Solr. По поводу системных требований и расчета ресурсов можно почитать тут и тут + расчет в экселе

Answer 6

[Maximus43]

У меня на проекте стоит связка PostgreSQL + Sphinx. Все замечательно работает, ресурсов много не кушает.

Answer 7

[Renat Ibragimov]

Поставить от Яндекс или Google поисковую форму.

Answer 8

[Михаил]

www.depesz.com/2010/10/17/why-im-not-fan-of-tsearch-2/

yet another good test

Comments

[Михаил]

www.depesz.com/2010/10/17/why-im-not-fan-of-tsearch-2/
yet another good test

— ! но щас существенно улучшается поиск в пг www.sai.msu.su/~megera/postgres/talks/Full-text%20search%20in%20PostgreSQL%20in%20milliseconds-extended-version.pdf

obartunov.livejournal.com/171959.html