Как посмотреть все редиректы запроса?

Question

[DUDE]

Я делаю запрос и пытаюсь посмотреть историю редиректов.

response = requests.get(url=...)

print(response.history)

У меня есть подозрение что туда падают далеко не все. Есть еще какой нибудь способ увидеть все редиректы?

Answer 1

[Vindicar]

Туда попадают только редиректы через коды ответа HTTP 3XX.
Javascript-редиректы или тег meta-refresh сработают в браузере, но requests их не обрабатывает, и потому ничего о них не знает.
Ещё один возможный механизм - DNS-запись CNAME для запрошенного доменного имени. Не уверен насчёт её реализуемости и взаимодействия с requests, но я сомневаюсь, что это будет замечено.

Comments

[DUDE]

а как то можно посмотреть все js редиректы?

[Vindicar]

requests не исполняет JS, оно тупо принимает поток байтов, а его интерпретация - дело программы.
Чтобы отработать JS, нужен браузер. Вообще я бы посоветовал открыть сайт в браузере и посмотреть там, в инструментах разработчика.

[DUDE]

Vindicar, полагаю что с селениумом будет проще

[Vindicar]

DUDE, я имел ввиду чтобы выяснить, есть ли вообще JS-редиректы на сайте и сколько. Если есть, то конечно нужен будет или селениум - или, возможно, сумеете сами определить алгоритм редиректа. Тогда можно будет самостоятельно синтезировать итоговую ссылку по исходной.

[DUDE]

Vindicar, спасибо :)