Поиск MySQL, как?

Question

[Кирилл Фирсов]

Здравствуйте.

Есть таблица вида:

ID | COUNT | DATA | DATE | TYPE | IP


Каждый день в базу добавляется около 500 тысяч записей.

Как можно сделать поиск по полю DATA быстрым и сколько времени будет занимать поиск по такой огромной базе через неделю, месяц?

Answer 1

[Kirill Mokevnin]

sphinxsearch.com/, не?

Answer 2

[try4tune]

Зачем Вам искать по ссылкам? Может стоит из ссылки выделить ту информацию, по которой будет происходить поиск, и хранить в отдельном поле с индексом по этому полю?

Answer 3

[Евгений]

какие данные в поле data?

Comments

[Кирилл Фирсов]

Примерно такие:
www.google.ru/search?as_q=google&hl=ru&newwindow=1&biw=1680&bih=866&num=30&btnG=%D0%9F%D0%BE%D0%B8%D1%81%D0%BA+%D0%B2+Google&as_epq=&as_oq=&as_eq=&lr=&cr=&as_ft=i&as_filetype=&as_qdr=all&as_occt=any&as_dt=i&as_sitesearch=&as_rights=&safe=images

Т.е. ссылки длинные

[Алексей]

Надо парсить ссылки и складывать туда их по частям :)

[AFoST]

Надо тиниурлом tinyurl.com/ пользоватся для таких длинных ссылок )
(если он тут на хабре не запрещен, конечно)

Answer 4

[Алексей Журбицкий]

скорость очень сильно будет зависеть от того, будет ли по полю DATA создан индекс

Comments

[gigigi]

только нужно помнить, что может снизиться скорость добавления

[Сергей]

Индексы тоже разные есть. и смотря как искать. Если искать по LIKE %search% то обычный индекс не работает, нужен полнотекстовый MyISAM.

Answer 5

[great_boba]

Первое что надо сделать для такого объема — это порезать таблицу по какому-либо признаку, потому что 500К записей в день — это много. Помнится была таблица с 4 млрд. записями, то всякие операции с этой таблицей были очень тормозные
Второе, вы не объяснили что именно за данные содержаться в поле DATA. Может сделать fulltext (укажите show create table). Если данные достаточно большие, то как указали в первом ответе, то сфинкс