Как разгрузить большую базу?

Question

[Александр]

Есть бд на mysql, в ней есть таблица на миллион+ строк, сейчас банальный запрос на селект по 1 параметру отрабатывает более 3 секунд, мы же делаем длинные запросы с join с обращениями к еще ряду таблиц, в результате пользователь ждет загрузки одного модуля по 5-7 секунд.
Подскажите как можно снизить нагрузку и увеличить скорость запросов при условии оптимизированного кода и запросов.
Можно просто ссылки на статьи (поискал, не нашел).

Answer 1

[Михаил Бобков]

Есть индексы по параметрам выборки?
Такое время для простого селекта на относительно небольших данных показывает что скорее всего нет.

Что выдает explain запроса?

Comments

[Александр]

[Александр]

Лентюй, это чисто примерный запрос, но т.к. я в sql полный профан, прошу объяснить что в нем неверного. Спасибо.

[Михаил Бобков]

Для этого запроса нужно поставить индекс по channel.
Сейчас для выборки каждый раз просматриваются все 1kk строк.

[Александр]

Михаил Бобков, могли бы вы написать пример такого запроса?

[Михаил Бобков]

https://dev.mysql.com/doc/refman/8.0/en/create-ind...

Создайте индекс для channel

Запрос пойдет гораздо быстрее.

[Vitaliy K]

Регулярно работаю с базами в миллиарды строк.
Что могу сказать:
1. всегда в запросе указывать set rowcount или limit, в зависимости от БД.
2. Индексы, куда уж без них.
3. При составлении запроса во WHERE указывать первым индексное поле, иначе положите базу.
4. По возможности забыть про запросы с * в селекте.

[Александр]

Vitaliy K, спасибо

Answer 2

[ThunderCat]

это чисто примерный запрос, но т.к. я в sql полный профан, прошу объяснить что в нем неверного.

Подскажите как можно снизить нагрузку и увеличить скорость запросов при условии оптимизированного кода и запросов.

При условии оптимизированного кода и запросов нагрузка будет примерно никакой, так как у вас они судя по представленному explain ооочень далеки от "оптимизированных".

Answer 3

[Иван Мельников]

Характер нагрузки на БД какой (чтение/запись)?
Все ли поля имеют наименьший достаточный тип данных?
Установлен ли не сервере минимальный достаточный уровень изолированности транзакций?
Оптимизированы ли запросы по "жадности"?

Answer 4

[Владимир Коротенко]

В общем случае создайте индексы на проблемных местах, оптимизируйте / деоптимизируйте БД, реорганизуйте запрос

https://dev.mysql.com/doc/refman/8.0/en/explain-ou...
https://habr.com/ru/post/211022/