Как нормально запустить spinx на сервере?

Question

[Сергей Толкачев]

Делаю поиск на сайте. Локалка на винде. На ней с плясками и бубном, но запустить сфинкс удалось и под него модули/плагины сделать удалось. Настало время переноса на прод и приключений.
Дано:
Sphinx 3.4.1 - лежит в /root/sphinx-3.4.1
Файл sphinx.conf - лежит в /etc/sphinxsearch/sphinx.conf

Содержимое sphinx.conf

#
# Minimal Sphinx configuration sample (clean, simple, functional)
#

source virt
{
    type            = mysql

    sql_host        = 127.0.0.1
    sql_user        = тут юзер
    sql_pass        = тут пароль
    sql_db          = тут имя базы
    sql_port        = 3306  # optional, default is 3306
	sql_query_pre	= SET NAMES utf8

    sql_query       = \
       SELECT ru.virtuemart_product_id as id,  ru.product_s_desc, ru.product_desc, ru.product_name, prod.product_sku \
        FROM e0bu9_virtuemart_products_ru_ru AS ru INNER JOIN e0bu9_virtuemart_products AS prod ON ru.virtuemart_product_id = prod.virtuemart_product_id 

}

index virtuemart
{
    source          = virt
    path            = /var/www/ЧАСТЬ_ПУТИ/data/sphinx/data/virt
	morphology      = stem_enru
	charset_table	= 0..9, A..Z->a..z, _, a..z, \
					U+410..U+42F->U+430..U+44F, U+430..U+44F, U+401->U+0435, U+451->U+0435
	blend_chars 	= +, U+23
	ignore_chars 	= U+AD
	min_word_len 	= 2
	html_strip 		= 1
}


indexer
{
    mem_limit       = 128M
}


searchd
{
    listen          = 9312
    log             = /var/log/sphinxsearch/searchd.log
    query_log       = /var/log/sphinxsearch/query.log
    read_timeout    = 5
    max_children    = 30
    pid_file        = /var/run/sphinxsearch/searchd.pid
    seamless_rotate = 1
    preopen_indexes = 1
    unlink_old      = 1
    workers         = threads # for RT to work
    binlog_path     = /var/www/ЧАСТЬ_ПУТИ/data/sphinx/data
}

Запускаем индексацию, находясь в /root/sphinx-3.4.1/bin/
indexer --all --config /etc/sphinxsearch/sphinx.conf
Индексация происходит нормально. Индексы ложатся там, где положено.

Запускаем ./searchd --config /etc/sphinxsearch/sphinx.conf и начинаются приключения.
Ошибки возникают самые разные. Чаще всего встречаются:
1. Не найден local index virtuemart.
Почитал, что для этого нужно перезапустить сфинкс. Остановили, запустили с указанием конфига Получаем:

~/sphinx-3.4.1/bin# ./searchd --config /etc/sphinxsearch/sphinx.conf
Sphinx 3.4.1 (commit efbcc65)
Copyright (c) 2001-2021, Andrew Aksyonoff
Copyright (c) 2008-2016, Sphinx Technologies Inc (http://sphinxsearch.com)

using config file '/etc/sphinxsearch/sphinx.conf'...
listening on all interfaces, port=9312
precaching index 'virtuemart'
precached 1 indexes using 1 threads in 0.0 sec

Но при этом процесс может не запуститься. Ни в ISP в сетевых службах его может не быть, ни по pgrep PID не видно. Если запускается, то локальный индекс не видит. На локалке тот же конфиг (пути другие, понятно), работает.
2. Проблемы при перезапуске: вдруг находит одновременно sphinxdata и мой конфиг, пользует sphinxdata и там не находит конфига.
Лечится удалением в очередной раз sphinxdata, перезапуском. Но это весьма странно, так как при запуске путь к конфигу указываю.

Перечитал немало почти не существующей русскоязычной документации и более обильной англоязычной. Но воз и ныне там.
Подскажите, пожалуйста, как запустить эту ТВАРЬ!

Answer 1

[Сергей Толкачев]

Итак, проблема решилась исправлением конфига. По какой-то причине сфинксу не понравились пути, которые я ранее указал для складывания индексов. Решил сделать по этому ответу на форуме сфинкса.

Путь для индексов /usr/local/sphinx/var/data
Путь для логов /usr/local/sphinx/var/log

После этого перезапустил сфинкс, находясь в директории /root/sphinx-3.4.1/bin (у Вас может быть другая директория установки).

./indexer --all --config /etc/sphinxsearch/sphinx.conf

Затем запуск самого сфинкса
./searchd --config /etc/sphinxsearch/sphinx.conf
Индексы подцепились, результаты в php получены.

Answer 2

[Александр Черных]

Странно
Находясь в папке /root/sphinx-3.4.1/bin/ запускать indexer нужно было с './' но Вы заустили без него, а searchd запускаете с './'
если никак не помогает, то пробуйте с указанием полного пути

/root/sphinx-3.4.1/bin/searchd и тд
/root/sphinx-3.4.1/bin/indexer и тд

Comments

[Сергей Толкачев]

Да, опыта с командной строкой линукс у меня не много. Основная проблема в том, что при запросе к сфинксу (когда он запущен) он не видит локальный индекс. При этом других решений кроме как перезапуск сфинкса в сети я не нашёл. Indexer и searchd запускаются с одним и тем же конфигом. На винде с тем же конфигом работает.

[Александр Черных]

Сергей Толкачев,
не ясно , что там у Вас за линукс, но запуски должны быть

/etc/init.d/searchd (start | stop | restart) //выбрать нужное, без скобок и пайпа
searchd - должен быть в автостарте сервера

в дальнейшем я бы сделал

indexer --config /path_to_sphinx/sphinx.conf --all

проверить /var/lib/sphinx - должен появиться индекс
далее по крону

crontab -u root -e

(это мой (online - имя индекса), Вы под себя адаптируете)
50 5 * * * indexer online --rotate >/dev/null 2>&1
25 */1 * * * indexer online_delta --rotate >/dev/null 2>&1 && indexer --merge online online_delta --rotate >/dev/null 2>&1

[Сергей Толкачев]

Александр Черных, Debian 4.9.272-2


Если запустить без конфига - запускается, но использует sphinxdata folder.



На ./searchd --stop реагирует

[Сергей Толкачев]

К сфинксу обращаюсь из PHP API (да, знаю, что считается устаревшим, потом переделаю на SphinxQL). И там в ответе получаю ошибку

[_error] => unknown local index 'virtuemart' in search request

После запуска сфинкса без --config создается sphinxdata. С ней он запускается, но не видит индекс. Может просто переложить индексы туда?

[Marsin]

Сергей, удалось решить вопрос? Если да, то как?

[Сергей Толкачев]

Marsin, здравствуйте. Да, опубликовал ответом к этому вопросу.