Как сделать чтобы скрипт успевал спарсить полностью выдачу апи бинанса?

Question

[Svoboo]

Есть апи бинанса, которое выдает список всех ордеров: https://fapi.binance.com/fapi/v1/trades?symbol=BTC... Максимально выдает 1000 строк.Мой скрипт получает данные с него и обрабатывает их. Среднее время выполнения скрипта 0.5сек. Проблема заключается в том, что периодически бывает всплеск ордеров и за эти 0.5 сек выдача апи полностью меняется и часть данных пропускается. Голову сломал что можно придумать чтобы таких пропусков не возникало.

Answer 1

[AUser0]

Получать данные и сразу запихивать их в очередь, на обработку.
Ну а после, уже в несколько сотен потоков, и обрабатывать любое кол-во поступивших данных.