Как избежать ошибку How to avoid HTTP error 429?

Question

[avdoshka89]

Всем доброго времени суток. У меня возникает ошибка How to avoid HTTP error 429 при парсенге страниц гугл. Помогите посоветуйте как избежать данную ошибку всем спасибо за внимание жду вашей помощи.

Answer 1

[Василий Банников]

Делать чуть меньше запросов в единицу времени.
Об этом и намекает ошибка )

Comments

[avdoshka89]

Даже при уменьшении запросов в единицу времени не решает эту проблему.

[shurshur]

avdoshka89, ограничения часто работают примерно так: первые, скажем, 100 запросов ограничения нет, а начиная со 101 берётся среднее число запросов в окне 10 минут и требуется, чтобы было не более 10 запросов в минуту, например. Тогда если сделать 100 запросов разом, то следующие 10 минут все запросы будут вызывать ошибку, сколько ни ограничивай их количество. Так что это не показательно.