Как сделать неблокирущий подзапрос в nginx после отдачи контента?

Question

[Philipp]

Суть такова - есть очень много картинок, запрашиваемых с сервера. Нужно отследить обращения к ним. Каждая имеет уникальный параметр. Сейчас имеется приложение на nodejs, которое сейчас все трекит и отдает картинки. Приложение не совсем стабильно.
Идея такова - вынести отдачу картинок на nginx, т.к. он очень надежный и как-то его настроить, чтобы делал подзапрос в ноду, но полностью игнорировал, что там внутри нее происходит. Грубо говоря, запросил и забыл про это.
Если даже нет коннекта, то вообще ничего не делать. Просто отдать картинку. Т.е. сначала отдать картинку, а потом подзапрос к ноде.
Может быть есть другие пути решения подобной проблемы.

Answer 1

[evnuh]

Куча вариантов приходит в голову, от быстрых типа redis & redis_nginx_module, а из редиса уже читаете чем угодно, до простых LUA сокетов внутри nginx-a. Отдали картинку nginx-ом, он сам запустил ваш lua-скрипт, который асинхронно отправил в ноду запрос и сразу вернул.

Answer 2

[Yuri Shikanov]

Может просто логи Nginx читать ?

Comments

[Philipp]

Да как-то не резон их даже включать. У меня 10 запросов в секунду поступает. Плюс траблы с логротейтом потом.

[Yuri Shikanov]

Philipp T: тогда может лучше на openresty все реализовать и не делать никаких подзапросов.

[Lynn «Кофеман»]

Philipp T: 10rps это мелочи. Логировать можно в syslog, в котором делайть с логами что угодно, можно в базу писать, по сети отправлять и т.п.

Answer 3

[Андрей Корвяков]

Нужно просто получить счетчики запросов по каждой картинке или нужна более хитрая стата?

Comments

[Philipp]

там внутри немного больше заморок, вроде гео-трэкинга и браузеров, плюс пути, кроче барахла прилично, потому и хочется это все дело выносить. Я вообще нашел модуль для сохранения запросов в монгу. В принципе можно все туда слить, а потом делать аггрегацию и прочие извращения.

[Андрей Корвяков]

Я бы предложил вариант с логами:
Ротация каждые 5 мин
Потом эти кусочки скармливаем парсеру

10rps - это копейки.
При таком подходе парсер может отваливаться/стопариться, и в отличии от монги Вы не потеряете статистику.

[Андрей Корвяков]

wiki.nginx.org/HttpLuaModule#ngx.eof