Правильно выбрать БД

Question

[joger]

На данный момент есть MySQL БД состоящая из нескольких таблиц. Каждая из таблиц это несколько миллионов строк из в основном текстовых полей. Сейчас поиск есть по единственному индексированному полю.
Сейчас где-то 100-200 тысяч запросов в сутки
Объём данных постоянно увеличивается, есть желание расширить поиск ещё на несколько полей(все — текст).
Как правильно подойти к этому вопросу? Другая БД, NoSQL, квантовый компьютер?
Заранее спасибо за любые мысли или линки по этому поводу

Answer 1

[mark_ablov]

Sphinx / Solr

Answer 2

[rPman]

Ответ кроется в том, как именно происходит поиск в строках? сравнение, подстрока like, полнотекстовый индекс. Что ищется… случайная строка или ключевое слово (подстроки, заранее определенные и редко изменяемые, максимум дополняемые). Так же очень важно каких запросов больше и на сколько (изменения, добавления, удаления, чтение или поиск).

А дальше, в зависимости от ответов, можно заменить тестовые поля на группу строго типизированных полей (в т.ч. и сложную структуру таблиц), можно поверх имеющейся базы настроить 'индекс из своих полей' (кстати это может позволить убрать индекс БД, что может в некоторых случаях ускорить запись) и т.п.

Comments

[joger]

основа базы — имя+фамилия(город, профессия, интересы и т.д.). запросы like. в будущем — часть ==, часть like

[rPman]

Перестройте базу данных так, чтобы запросов вида like '%xxx%' не было, да и like 'xxx%' тоже не эффективно.

Не удивлюсь, если у вас интересы записаны в виде строки, через запятую (или еще какая сериализация), такого надо избегать. Даже замена одного поля сотней boolean уже очень хорошо.

Answer 3

[Анатолий]

Если у Вас запросы вида LIKE «test%», то бейте таблицу на несколько, допустим а-з, и-т, у-я.