Почему такое большое время между запросами?

Question

[zhyeba]

Есть php-скрипт, который генерирует около 100к запросов в базу (исключительно SELECT с несколькими JOIN).

Проблема: в какой-то момент база как будто "подвисает" и скрипт начинает выполняться очень медленно.
Сделал лог тяжелых запросов
slow_query_log = 1
slow-query_log_file = /var/log/mysql-slow.log
long_query_time = 2

Как оказалось, всего 1 запрос выполнялся больше 2 секунд. То есть, видимо, проблема в том, что между запросами проходит большое количество времени (в скрипте нет проблемы, если возникнет такой вопрос).При этом все то время, что обрабатывается скрипт, ядро, на котором висит процесс, загружено на 100%.

Что можно с этим сделать?

Comments

[rPman]

100к запросов одновременные или последовательные?

[ThunderCat]

При этом все то время, что обрабатывается скрипт, ядро, на котором висит процесс, загружено на 100%.

процесс скрипта или мускуля?

[d'Ivan]

EXPLAIN запроса что показывает?
Каковы показатели использования памяти в это время? Может, начинает использовать swap?
Что с активностью диска в то же время?

[d'Ivan]

Короче, без мониторинга системы и приложения ничего конкретного нельзя назвать.

[zhyeba]

rPman, последовательные

[zhyeba]

ThunderCat, именно мускуля

[rPman]

вопрос номер два - у тебя физическое железо или vps-ка? дешевая (дешевле 30$ в месяц) или дорогая?

Answer 1

[Дмитрий Свиридов]

Как вариант, заканчиваются коннекты. Попробуйте увеличить параметр max_connections

Answer 2

[d'Ivan]

Попробуй подключить какой-нибудь APM, с помощью которого можно получить достаточно информации о запросах, соединениях и других характеристиках. Тогда не придется на кофейной гуще гадать.

Comments

[zhyeba]

пробовал анализировать исходный параметры mysql через github.com/BMDan/tuning-primer.sh , ничего критичного не нашел

[d'Ivan]

zhyeba,
Поиск: php apm