Какой фреймворк выбрать для долгих вычислений на стороне сервера?

Question

[Артемий]

Здравствуйте. В рамках лабораторной в универе необходимо сделать сайт, на котором по определенному запросу будут запускаться долгие вычисления, которые потом надо отобразить. Решение, которое пришло мне в голову:
1) пришел запрос на вычисления.
2) сгенерить ссылку, по которой будут доступны результаты, поставить задачу в очередь, клиенту в качестве ответа отдать ссылку. Для удобства можно скажем через AJAX периодически ее проверять на предмет готовности результатов. Или же использовать WebSoket. В общем в этом вопрос и заключается, что выбрать...
3) Когда вычисления готовы, поместить их в базу, соответственно при запросе на ссылку с результатом будет проверяться наличие в базе этих результатов и выдаваться ответ. Как-то оповестить клиента.

Подозреваю, что для таких задач есть фреймворки, думаю даже не один, подскажите пожалуйста, что лучше выбрать. Большой нагрузки (более 100 человек) не предполагается.
(предпочтительные языки: Python, Java, C++, PHP (в порядке убывания предпочтительности), но, думаю, смогу разобраться и в других)

Answer 1

[Сергей Протько]

nodejs + express + socket-io для апишки + websockets, что угодно для остального. Как вы и сказали, по запросы добавляются задачи в очередь, а как они выполняются - это уже дело третье. Обработчики задач могут периодически скидывать по http/tcp/udp ноде статус задач просто.

Вычислялку - зависит от того что оно будет вычислять но либо java либо C++ (либо Си, либо go либо rust).

Comments

[Артемий]

Спасибо. Вычислялка уже написана, но она совершает только одно вычисление. Есть ли какие-то существующие решения, чтобы в несколько потоков несколько вычислений одновременно запускать, или самому реализовывать на сервере?

[romy4]

Артемий: php/python/perl умеет многоподочно. эта drochka на nodejs везде, там где она не нужна

[Артемий]

romy4: Насколько я знаю, тот же Django плохо умеет с WebSocket-ами работать. Насчет php и perl-а не изучал вопрос.

[Сергей Протько]

Артемий: exec, есть у всех языков. И да, для вашей задачи можно вообще без фреймворков. Я не понимаю чего вы начали за них цепляться.

[Сергей Протько]

romy4: многопоточность это хорошо и бесполезно как правило, никакой "дрочки" нет, просто поднять websocket сервер на socket-io в 10 раз быстрее чем на чем то еще. А многопоточность это далеко не лучший вариант работы с вводом/выводом в контексте сервера. Если что - тот же nginx так же внутри использует event loop, как и node.js. И другие языки (вроде go) внутри на уровне рантайма просто по нескольким потокам раскидывают корутины).

[romy4]

Сергей Протько: event loop можно на любом языке использовать.

[Сергей Протько]

romy4: socket-io есть только под node.js. Чего-то "такого же" с таким количеством готовых интеграций под все (фронтэнд, андроид, ios, да под что угодно есть клиенты) и с таким покрытием стандартных юзкейсов вы просто ничего не найдете.

А то что event loop можно организовать где угодно (с учетом того что библиотека libev доступна всем и каждому) это я не спорю. Я вот на PHP использую и libev и корутины, и доволен.

Но какой смысл использовать что-то другое, если на ноде требуемую функциональность (простенький RPC сервер с websockets) можно реализовать за пару часов даже ничего не зная о ноде.

Answer 2

[LittleFatNinja]

при чем тут фреймфорк?

Comments

[Артемий]

Возможно я не правильно сформулировал. Но думаю, что скажем соединение по WebSoket с нуля писать бессмысленно. Мне кажется решения, которые позволят реализовать подобный функционал, уже существуют. Как и функционал в вопросе.

Answer 3

[romy4]

Если надо много и быстро посчитать, то c++ пойдёт маленький http сервер наваять. java медленней php.

Comments

[Сергей Протько]

java медленнее PHP? не вводите человека в заблуждение.

Answer 4

[programmerjava]

Если на Java, то подойдет Spring Boot (легкая версия фреймворка Spring в настройке).
Сокеты легко будет поднять (используйте Socks.js + STOMP). Вычисления отложенные легко делать, все не сложнее чем в других языках. Встроенная многопоточность и коллекции для быстрых вычислений вам подойдут. Ну и в универе у вас возможно преподают Java и с радостью примут лаболаторную\курсовую\дипломную на ней

Answer 5

[HoHsi]

1 Вариант - Красивый
Поскольку знаете Python, то возьмите его + Celery / RabbitMQ. Это отличные брокеры. А уведомить пользователя можно или из самого воркера (плохой вариант) или через RPC.

А в качестве Веб фреймворка django.

2 Вариант - быстрый
Выбрать булюбой рантайм язык Node.js, Python, Go, over9000. И все сделать в рамках одного приложения. Т.е. как только поступает запрос от пользователя, сразу-же запускать долгоживущий процесс, который в конце напишет в базу, и может быть дернет функцию, которая уведомит пользователя через WebSocket / Email / Ajax.

3 Вариант - на**ярить
Берем, что угодно, даже не долгоживущий, пишем не нем ручку, которая делает запрос и пишет в базу задачу.
Делаем скрипт на чем угодно, который по крону проверяет эту самую очередь, и если там что-то есть выполняет эту задачу, и уведомляет пользователя, с.м. пункт 2.