Как оптимизировать sql запрос?

Question

[Александр]

select * from
( select * from feed where date > '2019-01-01' order by date desc) as x
where jid = 1321
group by cid

Нужно ли показать сетку таблицы для поддержки в оптимизации написания скрипта?

Comments

[Александр]

Иван, Прошу меня простить, mysql конечно

[Александр]

Иван, Не совсем понял про "посчитать". Запрос делает выборку данных из базы в 30 000 строк 300 раз подряд при загрузке страницы (идшник только меняется). А страницу, соответственно, грузит регулярно 10-20 человек (не часто).
Так выходит что выборка такая(из 30 000 * 300 раз подряд) грузится примерно минуту, а хотелось бы чтобы что-то +- вменяемое для пользователя. Сервис весьма технический, но всё-таки минута под нагрузкой превращается в несколько минут.

[Александр]

Иван, В базе лежат люди с определёнными статусами, делаю выборку по этим статусам и в последствие обрабатываю на php её. Также люди связаны с проектами (идшник) поэтому выборку делаю людей с определённым статусом по определённому проекта 300 раз подряд.

[Александр]

Иван, Не могу понять как это реализовать, ведь выборка табличная, каждая строка - свой идшник.

[Сергей c0re]

во-первых, зачем группировка по id если есть условие - where id = 1321 ??
т.е. выбирается по одному id и при этом нет агрегирующих функций ??
во-вторых зачем условие вынесено в подзапрос?

[Александр]

Сергей, потому что я дурнул, сейчас поясню

[Александр]

Сергей, по дурацки сократил запрос просто. скорректировал, там разные идшники

select * from
( select * from feed where date > '2019-01-01' order by date desc) as x
where jid = 1321
group by cid

[Сергей c0re]

Александр,

Также люди связаны с проектами (идшник) поэтому выборку делаю людей с определённым статусом по определённому проекта 300 раз подряд.

зачем 300 раз подряд?

еще подробнее все опишите...
какие данные (таблицы) как связаны, что в итого надо получить?

[Александр]

Сергей, потому что есть 300 проектов по которым надо выбрать данные и засунуть построчно в табличку где одна строка - один проект и в одном из столбцов вываливается выборка из таблицы feed

а тут нет особенно подробностей, я дальше выборку разбираю это на php (как говорится, как умею) где-то забираю дату от нужного статуса нужного человека, где-то забираю статус, где-то проверяю наличие нужного статуса и от этого дальше вывожу его или нет и тд

[Сергей c0re]

Александр,

потому что есть 300 проектов по которым надо выбрать данные и засунуть построчно в табличку где одна строка - один проект и в одном из столбцов вываливается выборка из таблицы feed

проектов может быть тысячи... и на каждый дергать из feed ?
нужно больше подробностей..
как проекты связаны с feed с пользователями и пр.?
всю "таблицу" что выводится можно одним запросом наверняка построить.

[Антон Шаманов]

Александр в mysql есть замечательная вещь view, с помощью "видов" можно агрегировать данные из нескольких таблиц/запросов

[Антон Шаманов]

Иван, mysql - max_allowed_packet: Minimum Value 1024 т.ч.варинт вставить в запрос все id может и не прокатить если база большая и старая

[Сергей c0re]

Александр, вот пример связи проектов и пользователей и пример использования группировки, см. на sqlfiddle

первый запрос возвращает проекты и количество связанных с ним пользователей
второй запрос возвращает пользователей и количество проектов в которых он участвует

а какие у вас связи и что вы хотите сделать?

Answer 1

[ThunderCat]

select * 
from feed
where date > '2019-01-01' 
and jid in ( тут, айдишники, всех, 300, спартанцев, вместо, 300, запросов)
order by date desc

Comments

[Александр]

Я понял что имеет смысл все ид вместе запилить вместо 300 запросов, но у меня нет навыка чтобы сформировать эту таблицу не построчно с отдельными запросами, а всё разом. плюс, к тому же, там до этого запроса идёт ещё и другая выборка верхнего уровня, которая получает сами эти проекты и данные по ним

[ThunderCat]

Александр, возможно имеет смысл их объединить? Все еще не сосем понятны ваши манипуляции, вы бы описали структуру базы и что вообще нужно, можно даже скринами со структуры в пхпмайадмине.