Что делать Request.get не выдает весь код страницы?

Question

[argeo05]

Вот код:

import requests
from bs4 import BeautifulSoup

resp = requests.get('https://csgorun.pro/').text

print(resp)

Захотел попарсить этот сайт и наткнулся на проблему: get запрос выдает не код сайта, а какую-то сокращенную версию что ли. Может нужно другим модулем парсить?

Comments

[mayton2019]

Ты разобрался что внутри сокращённой версии? Это - то что исполняет браузер.

Answer 1

[Сергей Горностаев]

Добро пожаловать в Web 2.0, в котором вот уже 15 лет бó‎льшая часть контента на странице формируется фронтом.

Comments

[argeo05]

и как быть?

[Сергей Горностаев]

argeo05, либо использовать Selenium, либо открывать сайт в браузере, смотреть в DevTools куда делаются ajax-запросы и какие, а потом повторять из из своего скрипта.