@rsytrade

Как в Scrapy отключить redirect?

Пытаюсь просканировать сайт в домене en, но при парсинге запрос редиректится в зону ru, соответственно собираются страницы сайта на русском языке. Пробовал поставить
custom_settings = {
        'REDIRECT_ENABLED': False
    }

но не помогло, что еще можно посмотреть/проверить?
  • Вопрос задан
  • 72 просмотра
Пригласить эксперта
Ответы на вопрос 1
al_gon
@al_gon
https://doc.scrapy.org/en/latest/topics/downloader...

meta={'dont_redirect': True,"handle_httpstatus_list": [302]}
Ответ написан
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы