Python requests Как оставаться на странице и перехватывать изменения?

Question

[Акшин Ёлчуев]

Значит делаю парс страници
но страница сначала выводит js эффект загрузки страници после чеко появляются меню и все остальное
но при парсе страници через get запрос парсится только эффект загрузки страници
но не парсится все то что идет дальше.
В инспекторе просмотрел все запросы нигде нету того что мне нужно все показывает только загрузку страници .

Answer 1

[Иван Шумов]

Ну так по тому что requests не работает с Javascript) Тебе нужен puppeteer/selenium или разбирать код сайта чтобы понять не Ajax ли там или еще что

Comments

[Акшин Ёлчуев]

тоесть никак не возможно спарсить через requests?(

[Иван Шумов]

Акшин Ёлчуев, нет) HTTP протокол надо знать как бы чтобы понимать что ты вообще делаешь) И как работает вообще браузер в принципе, а также что делает библиотека, которую пробуешь использовать

[sotanodroid]

Акшин Ёлчуев, requests это не парсер а способ выполнения http запросов на удаленные сервисы. С парсингом ничего общего.

Answer 2

[soremix]

нигде нету того что мне нужно

Какое-то чудо значит, если контент берется из воздуха

Ссылку на сайт