Как делать параллельно 1000 https запросов?

Question

[mitaichik]

Всем привет!

Есть проектик (Spring Boot), в котором нужно делать кучу запросов к стороннему api.
По 1000 запросов одновременно, без перерыва.

Какую любу посоветуете для подобного, чтоб приемлемо по ресурсам?
До этого всегда юзал OkHttp / Retrofit (столь близких для android, но и на бэкенде она прекрасно работает)
Но, боюсь, она такого не потянет....

Comments

[Jacen11]

ну и с чего ты взял что не потянет? там диспатчер io используется, в чем проблема?

[mitaichik]

Jacen11, сейчас в течении нескольких часов сделал около 400 тыс запросов - процесс раздулся на до 1.5гб. Утечек вроде не должно быть...

[Jacen11]

mitaichik, запросы же обычные по хттп?

[mitaichik]

Jacen11, мой косяк, забыл закрывать body. Ну то есть response.body().close(); Добавил строчку - вроде не жрет память.

[Jacen11]

mitaichik, можешь показать код? не очень понял что за конструкция и где. Мне самому интересено

Answer 1

[Dmitry Roo]

webflux-client

Answer 2

[mitaichik]

Ребята, в общем на OkHttp зря грешил - вроде норм держит.
Мой косяк бы в том что я тело ответа не закрывал.