Как избежать 429 ошибки при скраппинге?

Question

[StreetWanderer]

Стороннее API кидает 429 ошибку (Too Many Requests) примерно через каждые 3000 запросов.
Задержка в несколько секунд через каждые 2000 запросов не помогает.
В голову приходит только делать запросы через прокси и ротировать их.
Может, что-то еще можно придумать?

Answer 1

[Everything_is_bad]

долбить API с меньшей частотой, а еще лучше, выяснить какие у них лимиты и начать их соблюдать