Какое выбрать решение для одновременной загрузки больших файлов?

Question

[Антон Иванов]

Всем привет.

Основное приложение написано на Rails. Пользователи могут загружать большие файлы (до 700 мегабайт).
Как организовать одновременную загрузку файлов, чтобы сайт (основное приложение) продолжал работать?
Допустим враз могут загружать 50-100 человек. Не очень большое число, но потоков пумы не хватит на всех, да еще и сайт перестанет работать :)

Была мысль задействовать для этого ноду, но я помню, что ноду хорошо использовать для быстрых и мелких задач (вплотную с нодой не работал, так, несколько мелких приложений для добавления комментариев и других мелких задач)

Подскажите пожалуйста :)

Answer 1

[Aleksey Hukendo]

Ну если вы заговорили про ноду, то у вас явно есть реверс прокси, вот и пусть он загружает.
Ноду вы вполне можете использовать по причине её асинхронности, но есть одно но. Если одно ядро вашего ЦП не сможет утилизировать в полном объеме производительность вашего стораджа(hdd/ssd), то он будет простаивать без дела и тогда нужно запускать нескольких экземпляров ноды.

Comments

[Антон Иванов]

Как реверс прокси - nginx.
Можно поподробнее, что значит "пусть он и загружает"?
Допустим nginx принял файл. Дальше ведь ему надо как-то "пнуть" рельсы (ну, или sidekiq), что "появился новый файл, надо бы им заняться"

[Антон Иванов]

Спасибо за верное (наверное) направление, нашел такую статью: https://coderwall.com/p/swgfvw/nginx-direct-file-u...
Если все так, как я понимаю, то это будет отличным решением.

[Aleksey Hukendo]

да все правильно вы поняли, думаю поручить загрузку nginx будет лучше всего.

Answer 2

[vsuhachev]

Купить хостинг файлов (например на Амазон) и грузить сразу на него, ваш сервер будет хранить только ссылки на файлы в облаке

Comments

[Антон Иванов]

Файлы нужны на своем сервере для почледующей обработки.