Почему requests возвращает html страницу с незакрытыми тегами, а в браузере все нормально?

Question

[Дмитрий]

В общем, пытаюсь проспарсить один сайт. requests возвращает html страницу с незакрытыми тегами<p> (в то время как в браузере всё ок), а затем уже, видимо, сам bs4 начинает закрывать теги, но делает это неправильно, в итоге получается каша

Вот банальный код:

import requests

URL = 'https://proproprogs.ru/django/model-mtv-marshrutizaciya-funkcii-predstavleniya'
response = requests.get(URL, headers={'User-Agent': 'Chrome/98.0.4758.82'})

print(response.text)

Результат на фото:


К слову, вот это делает уже bs4:

гуглил, ответа не нашел. Чем вообще обусловлено такое поведение ? ошибки на уровне самого сайта ?