Существует ли практика выставления приоритета запросу в очереди сообщений?

Question

[Сергей Соловьев]

Очереди сообщений используют для различных кейсов, но меня интересует следующий:

При больших нагрузках на систему можно каждый запрос отправлять в очередь сообщений и дополнительно навешивать ему приоритет. Тогда потребитель (возможно в случае какого-нибудь DDoS или распродажи например) сможет более приоритетные/важные запросы обработать. Да, некоторые запросы будут выполняться дольше, но критичные будут выполнены.

Существует ли такая практика? Или есть подводные камни, которые я не учел, например, выставление ограничения по размеру на эту очередь.

Comments

[mayton2019]

Непонятно что делать на UI с низко-приоритетными запросами. Ты должен поговорить
с бизнесом и придумать оптимальное решение на тот случай когда время ожидания
истекло по приоритету. Что-то вроде написать плитку "Извините сервер перегружен и вас не смогли
обслужить в течение 5 минут. Попробуйте позже". Здесь ты экономишь длину очереди.

Или договориться что очередь будет бесконечной и клиент в конце концов получит
ответ но уже в оффлайне вида отчета по работе джоба например.

Вобщем это не технические а технико-организационные вопросы. Я считаю.

Конечно лучше масштабировать задачу так чтобы раз в год (черная пятница) просто
подключить больше нодов в кластер.

[Сергей Соловьев]

mayton2019, это больше теоретический вопрос - пишу вкр и надо как-то доказать актуальность. проект - очередь сообщений с приоритетами

[mayton2019]

Сергей Соловьев, существует ли практика? Да существует. В банках VIP клиенты всегда обслуживаются
в первую очередь. Вот вобщем-то и все.

[Игорь]

В компьютерных сетях есть термин QoS ("качество обслуживания"). Приоритезация трафика и прочее. Например, есть трафик, который не может ждать: видеопоток, он-лайн игры. Этот трафик обладает большим приоритетом. Ему, соответственно, должна быть выделена большая часть пропускной способности канала связи. Все остальное будет ждать. Или тащится медленно.
Установка обновлений в Windows. Тоже, типо, происходит только тогда, когда система простаивает. Чтобы не мешать пользователю. Смотрим: ага, бездействие системы 80%. Ну, погнали!
А так, в жизни, у нас бабули, обычно, ну вы поняли... Вообще-то, определенная категория граждан. :)

Answer 1

[asmelnik]

Похожая проблема для сетевого трафика решена путем "раскладки" пакетов по нескольким очередям разного приоритета (вроде чаще всего 3 шт).
Пример алгоритма
есть 3 очереди: высокий приоритет, средний, низкий.
Данные из очередей извлекаются в таком порядке:
Из высокоприоритетной за проход при наличии данных - 4 сообщения, из среднеприоритетной - 2, из низкоприоритетной -1..
И так и бегаем по кругу - 4, 2, 1, 4, 2, 1....

Распределение сообщений по очередям -- это уже на вашей совести будет :)