Как лучше делать запросы в БД разом или несколько раз для получения данных?

Question

[gomerIT]

Мне нужно выводить данные пользователей в админке, которые зарегистрированные в системе. Если к примеру всего пользователей 100к. Вывод происходит в виде таблицы первых 15 пользователей дальше идет паддинг с кнопками переключения. Как сделать лучше в плане оптимизаций? Выполнить 1 запрос на получение всех данных или же несколькими запросами?

Comments

[Евгений]

вы спрашиваете запросить ли вам 15 пользователей или 100к чтобы показать 15 пользователей?

[Сергей delphinpro]

Получение всех данных — это что? Всех юзеров разом дернуть? 100к уже дофига, а если их миллион или 10 лямов?

[gomerIT]

Сергей delphinpro, Да всех юзеров. Получается разом это не вариант?

[Сергей delphinpro]

gomerIT, ну нет конечно! как такое в голову-то пришло? Представьте (или просто попробуйте), сколько данных нужно вывалить на страницу разом. Браузер с ума сойдет и будет сильно тупить, если вкладка вообще не помрет.

[edo1h]

на хабре было много статей про пагинацию, гугл в помощь.

Answer 1

[nokimaro]

Запрашивайте столько данных, сколько хотите отобразить.
LIMIT + OFFSET в помощь.

Answer 2

[Pandorex]

LIMIT + OFFSET на значениях далеких от начала - будут все медленнее
предположив что у вас есть сортировка по какому-либо полю, оптимальнее всего было бы передавать в качестве офсета последнее значение по которому указана сортировка и добавлять его в запрос как "email > 'LAST_EMAIL' "

как правило вывода далеко от начала не требуется и проще реализовать обычные LIMIT + OFFSET

Answer 3

[cicatrix]

Вброшу свои мысли. 10К пользователей, разбитые на странички по 15 будут представлять собой 6667 страниц.
Да, разумеется, можно сделать подобную разбивку, так как здесь уже писали, но это равно сделать "на от.бись!"
Совершенно очевидно, что ни один человек в здравом уме и трезвой памяти не будет листать 6К страниц.
Естественно, усвоив это, необходимо вернуться в начало и понять, каких именно пользователей и по каким критериям будет в этом интерфейсе искать оператор. Видимо, ему не нужны все пользователи без исключения, ему нужны какие-то особенные, отличающиеся по какому-либо признаку. Соответственно и интерфейс предоставлять такой, чтобы облегчить этот поиск.