Ошибка 403 requests?

Question

[swpavlov]

В какой-то момент разработки, сейрвер стал выдавать ошибку 403. Менял headers, пробовал подключить прокси - все без толку. Код ниже. Пробовал разные вариации и полноты headers!

url = 'https://avito.ru/'
headers = {'user-agent': 'Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:82.0) Gecko/20100101 Firefox/82.0', 'accept': '*/*'}
proxyDict = {
    'https': 'https://47.253.10.161:8080'
}

    def req(self, url):
        r = requests.get(url, headers=headers, proxies=proxyDict)
        return r

Comments

[Сергей Горностаев]

Поздравляю с подрывом на защите от парсинга.

[swpavlov]

Сергей Горностаев, спасибо! Возможно ли как-то ее обойти?

[Сергей Горностаев]

swpavlov, наверняка, но готовый рецепт вы вряд ли найдёте. Эти защиты делают умные ребята и постоянно их дорабатывают.

[Antonio Solo]

Сергей Горностаев, применительно к авито рецепты есть, но никто их не будет выдавать бесплатно, и тем более в паблик.

[Сергей Горностаев]

Antonio Solo, только они каждые две-три недели новые. И да, если выложить в паблик, то они потеряют актуальность уже через 2-3 дня.

Answer 1

[Antonio Solo]

сервер вычислил сто вы его парсите и начал бороться с вами.

что вы хотите получить от вопроса ? особенно если

Менял headers, пробовал подключить прокси - все без толку. Код ниже. Пробовал разные вариации и полноты headers!

Comments

[Apache]

Можете мой вопрос посмотреть?