Можно ли реализовать «умный» поиск по БД?

Question

[Александр]

Решил сделать поиск по товарам на сайте. И тут возник вопрос, а как сделать "умный" поиск?
К примеру, есть товар с таким описанием "Выключатель legrand (Белый)". Если пользователь введет в поиске "выключатель", то ему выдаст много позиций. А вот если он захочет поискать "выключатель белый", то ему поиск ничего не выдаст. А как можно научить его понимать такие выражения?

Comments

[Akina]

https://dev.mysql.com/doc/refman/8.0/en/fulltext-s...

[Drno]

Я не програмист, но чисто по логике.
Берем оба слова в переменные, делаем по каждому выборку из базы, соединяем выборку в 1 список, отдаем ответ
Либо искать сразу в каком товаре встречаются оба слова одновременно

[Александр]

Drno, такая мысль была, но решил узнать а не шагнули ли технологии вперед и не нужно говнокодить

[Drno]

Александр, подождем програмеров)
Но мне не ясно где тут говнокод. По мойму вполне рабочая схема)

[index0h]

Drno,

Берем оба слова в переменные, делаем по каждому выборку из базы, соединяем выборку в 1 список, отдаем ответ

Отличная идея, что бы вывести бд из строя достаточно передать большой список слов))

[Drno]

index0h, спорить не буду, не моя сфера. но откуда там возмется большой список слов то? И разве нельзя просто ограничить запрос по количеству слов?

[index0h]

Drno,

спорить не буду, не моя сфера. но откуда там возмется большой список слов то?

вы когда в google запрос отправляете используете только 1-2 слова, или больше?

И разве нельзя просто ограничить запрос по количеству слов?

Конечно можно, но зачем? Возьмем для примера ограничение 2 слова, пользователь вводит "полнотелый кирпич лицевой красный", вы ему выдадите все по словам "полнтлеый кирпич", если он поменяет порядок слов - выборка изменится, но все равно не будет достаточно ограничена. Что не правильно и ухудшает пользовательский опыт.

Использование в данном случае большого запроса с учетом каждого слова (без пунктуации и связок типа "и", "или", "а", ...) имело бы больше смысла.

[Akina]

Drno, схема-то рабочая, но производительность ни к чёрту.

Answer 1

[Ипатьев]

Это называется полнотекстовый поиск.
В самом примитивном варианте создаётся fulltext index на поля, по которым будем искать. При этом база данных берет каждую запись в таблице, разбивает её на слова, записывает их в индекс и для каждого слова указывает - в каких строках таблицы оно встречается.
После этого можно сделать запрос по нескольким словам.
Например,

SELECT * FROM goods WHERE MATCH(name) AGAINST ('+выключатель +белый' IN BOOLEAN MODE);

найдёт таки все белые выключатели

Но встроенный в MySQL полнотекстовый поиск работает так себе и обычно пользуются внешними системами, Spinx Search или Elasticsearch

Comments

[Александр]

Спасибо, я это уже посмотрел и попробовал. Тут есть один недостаток.
Тот же LIKE найдет даже радиореле, если пользователь укажет слово "реле", данная конструкция не находит ((

[Ипатьев]

во-первых, если вы пробовали, и вас не устроило, то надо было об этом написать в вопросе, не так ли?
в этом случае я бы не тратил время на написание ответа, а вы - комментария

[Александр]

Роман Юрьевич Ипатьев, Вы меня не так поняли. Просто мне посоветовали это раньше Вас и я уже успел проверить пока не прочитал Ваш комментарий. Спасибо

[Александр]

Роман Юрьевич Ипатьев, и, кстати, я проверял в режиме NATURAL LANGUAGE MODE, а не как Вы указали IN BOOLEAN MODE. А в этом режиме есть совпадения, по тому моменту о котором я Вам выше написал, но нюансы конечно есть

Answer 2

[index0h]

Elasticsearch с морфологией вам в помощь.

Comments

[Александр]

Спасибо, пока попробую ограничиться штатными средствами