Как сбросить кеш на всех серверах?

Question

[Webber]

Есть nginx как прокси на 2 бекенда. У каждого бекенда свой файловый кеш. При добавлении новости на сайт нужно сбрасывать кеш на всех серверах. Бекенды между собой не общаются, но в целом можно сделать.
Вот схема: тут

Какие есть стратегии для сброса кеша?
Пока придумал такой вариант: добавить метод в апи /api/cache/clear, на nginx написать код чтобы get запрос отправить и на все сервера сделался запрос. И когда новость добавляется вызывать этот метод. Как написать такой код для nginx или другое решение?

Comments

[Модератор]

Webber Читаем п. 3.9 регламента работы сервиса и исправляем. Спасибо.

Answer 1

[Alex Karo]

Да, можно отправлять запросом, но:
1) Есть функционал очистки кэша по определённым критериям, доступен он только в коммерческой версии nignx
https://nginx.org/ru/docs/http/ngx_http_proxy_modu...
2) Конечно, можно накостылить, чтобы по определённому запросу удалялись файлы. Но лучше это как-то защитить (хоть basic auth). И, кажется, это потребует перезапуска nginx (может и reload хватит).
3) Ещё есть модуль https://github.com/FRiCKLE/ngx_cache_purge - но я не знаю, насколько он сейчас работоспособен

Как вариант - перенести кэш из nginx в другое более управляемое хранилище (например редис) и очищать его при правках.

Comments

[Webber]

Кеш же хранит не nginx, а бекенд сервера.
Сейчас редис и стоит, в разы хуже чем файловый, по скорости и загрузке cpu.

[Webber]

мне бы какое условие в nginx написать, чтобы я вызвал из бекенда http://nginx/api/cache-clear и вот этот локейшин cache-clear в nginx прошелся по всем upstream и отправил запросы

[Alex Karo]

Webber, Тогда что мешает очистить кэш напрямую во время правки?
Я так понимаю, оба бэкэнда хранят кэш на одной redis базе?

[Webber]

Alex Karo, да оба в редис смотрят. Там кеша >10 гб, и редис жрет ресурсов кучу и на проде в разы хуже чем файловый, поэтому хочу перевести на файлы и тут проблема сброса, так как файловый у каждого свой.

[Alex Karo]

А почему не сделать кэш на проксирующем nginx?
Тогда не будет у каждого свой кэш

[Webber]

Alex Karo, 1. логически не подходит, nginx как прокси для десятка микросервисов идет и хратить для одного какой-то кеш не идет. 2. да и не представляю что так вообще возможно. бекенд на php симфони, в кеше хранятся запросы к бд, как его стыковать с nginx? это же не статика

[Alex Karo]

Webber,
1. Не понятно. В указанной схеме 2 бэк-сервера и 1 nginx прокси. Оба бэка, как выяснили, обращаются за кэшем в редис, который хотим убрать. Про 10 микросервисов речь не шла. Какая, в итоге, реальная схема?
2. Что отдаёт бэк - json или html? Что мешает кэшировать его?