Как ускорить запрос SELECT count?

Question

[Игорь Баляс]

Как ускорить запрос SELECT count(*) FROM table WHERE any_id IN (1, 2, 3, 4, 5, 6, 7, 8, 9)?
Записей в таблице 700 000 +, индекс на any_id тоже есть, но запрос выполняется примерно 2-3 сек.
База данных mariadb 10+, таблица типа InnoDB

Comments

[Алексей Уколов]

Оптимизация любого запроса начинается с EXPLAIN.

[Игорь Баляс]

это все делали, индекс берется

[ldv]

может innodb_buffer_pool_size увеличить?

Answer 1

[Дмитрий Донковцев]

Единственный способ ощутимо ускорить COUNT, это не использовать COUNT, для определенных задач есть альтернативы, например если COUNT нужен вам для постраничной навигации, то можно выбирать число страниц больше нужного в n раз + 1 и на основании этого делать пагинацию.

Пример:
В таблице 700000 записей, нам нужно вывести десятую страницу с 10 записями с постраничной навигацией: выбираем не 10, а 41 запись (не забываем про офсет), выводим 10, но благодаря тому, что выбралась 31 запись вперед, мы знаем что еще есть как минимум 4 страницы на которые можно отобразить ссылки.

Answer 2

[shagguboy]

предрасчитывать всё это при insert/update

Comments

[Игорь Баляс]

не выйдет потому что иногда кроме этого параметра есть еще другие

Answer 3

[Макс]

попробуйте IN заменить на ANY.

Comments

[Котик Антон]

When used with a subquery, the word IN is an alias for = ANY. Thus, these two statements are the same:
SELECT s1 FROM t1 WHERE s1 = ANY (SELECT s1 FROM t2);
SELECT s1 FROM t1 WHERE s1 IN (SELECT s1 FROM t2);

dev.mysql.com/doc/refman/5.0/en/any-in-some-subque...

[Игорь Баляс]

у меня есть возможность напрямую указать, ненадо делать подзапросы, это еще больше его нагрузит

[Макс]

Игорь Баляс: что говорит EXPLAIN?

[Игорь Баляс]

type index key any_id rows 576493 Using where; Using index

[Макс]

Игорь Баляс: хм... странно. у меня за 4млн строк, похожий запрос отрабатывает на 0,3-0,4 сек. правда в EXPLAIN type = range.
совсем унылое железо?

[Игорь Баляс]

нет железо норм

[ldv]

Игорь Баляс: у вас процесс mysql сколько памяти занимает? Может MariaDB с дефолтным конфигом? Тогда надо настроить параметры буферов.

[Игорь Баляс]

2GB

[ldv]

Игорь Баляс: т.е. пользовались firstwiki.ru/index.php/%D0%9E%D0%BF%D1%82%D0%B8%D0... ?

[Игорь Баляс]

да

Answer 4

[Aleksey Ratnikov]

Попробуйте

SELECT count(*) FROM table WHERE any_id BETWEEN 1 and 9

Comments

[Игорь Баляс]

данные рандомные, не подойдет between

[Aleksey Ratnikov]

То есть any_id - это не целый числа?

[Игорь Баляс]

да

Answer 5

[Александр Мелеховец]

Таблица со счётчиками, обновлять либо триггерами, либо из приложения при вставке/удалении, либо по крону, если погрешность допустима.

Можно тип данных для any_id взять поменьше размером, чтоб ужать индекс, но много это не даст.