Почему не работает wordforms в sphinx?

Question

[Александр Арбузов]

На bitrix запустили поиск на основе sphinx.
Конфиг

index default
{
	# Main settings
	type			= rt
	path			= /var/lib/sphinx/default/index
        wordforms       = /etc/sphinx/bx/dicts/wordforms.txt
	#docinfo 		= inline
        ondisk_attrs    = 1

	# Choose appropriate type of morphology to use
	morphology 		= lemmatize_ru
	blend_chars = +, U+23, *
	charset_table = 0..9, A..Z->a..z, _, a..z, U+410..U+42F->U+430..U+44F, U+430..U+44F, U+401->U+451, U+451

	# These settings are used by bitrix:search.title component
	dict 			= keywords
	min_prefix_len 		= 2
	min_stemming_len    = 2
	min_word_len        = 3
        <тут всякое про rt индексы>
  }

В файле wordforms прописано
стаканчик > стакан
стаканч > стакан

Проверяю в консоли

mysql> call keywords('стаканч','default');
+------+----------------+----------------+
| qpos | tokenized      | normalized     |
+------+----------------+----------------+
| 1    | стаканч        | стаканч        |
+------+----------------+----------------+
1 row in set (0.00 sec)

mysql> call keywords('стаканчик','default');
+------+--------------------+--------------------+
| qpos | tokenized          | normalized         |
+------+--------------------+--------------------+
| 1    | стаканчик          | стаканчик          |
+------+--------------------+--------------------+
1 row in set (0.00 sec)

На сайте так же ничего не находит. Что не так настроено?

Comments

[Роман Грицук]

Полную переиндексацию делали? Настройки - Поиск - Переиндексация (снять чекбокс Переиндексировать только измененные)

В настройках модуля Поиск стоит "Использовать морфологию" ?

[Александр Арбузов]

Роман Грицук, да. И переиндексацию делал и морфология отмечена.

[Роман Грицук]

А как сам поисковый запрос формируете? Пробовали на "чистом" API без использования компонентов ? Может дело в настройке компонента

[Александр Арбузов]

Роман Грицук, да дело даже не в компоненте. При запросе напрямую в sphinx видно, что он не учитывает wordforms

Answer 1

[Пума Тайланд]

Сфинкс то перезапустили после изменения конфигурации?

Comments

[Александр Арбузов]

Перезапустил - не помогает.
На форуме sphinx пишут, что надо удалить и пересоздать сам индекс, но я не знаю как это сделать. В bitrix всем этим sh скрипт занимается

[Пума Тайланд]

Александр Арбузов, выключите сфинкс удалите их папки с данными сфинкса все файлы, запустите сфинкс

[Александр Арбузов]

Пума Тайланд, индекс у меня default. Удалить содержимое папки default? А то я удалял всю папку целиком и получал ошибки при старте

[Пума Тайланд]

Александр Арбузов, удалите

[Александр Арбузов]

Пума Тайланд, после удаления содержимого /var/lib/sphinx/default при запуске ошибка
Job for searchd.service failed because a configured resource limit was exceeded. See "systemctl status searchd.service" and "journalctl -xe" for details.

То же самое и вчера было.

[Пума Тайланд]

Александр Арбузов, ну так вы ошибку то посмотрите

[Александр Арбузов]

Пума Тайланд, эк вы сразу с козырей зашли :)
Заработал. Спасибо вам большое.
Не подскажите ещё один момент? Я по запросам "стаканч" и "сткаканчик" теперь получаю "стакан" как и должно быть. Но при промежуточных "стаканчИ" или "сткаканчикИ" стакан не находит. Как такие вещи настраиваются?

[Пума Тайланд]

Александр Арбузов, стемминг включите

[Александр Арбузов]

Пума Тайланд, получается немного не то если множественное число использовать.
mysql> call keywords('стаканчики','default');
+------+----------------------+--------------------+
| qpos | tokenized | normalized |
+------+----------------------+--------------------+
| 1 | стаканчики | стаканчик |
+------+----------------------+--------------------+
1 row in set (0.00 sec)

А мне надо на выходе получить "стакан".

[Пума Тайланд]

Александр Арбузов, посмотрите мою статью на Хабре про сфинкс там есть вариант который вам может помочь но тоже будет не идеал

[Александр Арбузов]

Пума Тайланд, уже прочитал. В итоге просто в wordforms добавил.
Я попробовал одновременно включить и стеммер и леммайзер, но у меня старая версия и выдает ошибку. Они вообще одновременно умеют работать?