Почему выдаёт ошибку при парсинге?

Question

[Эрнест Варданян]

import requests
from bs4 import BeautifulSoup

URL='https://mel73157.site/live/mortal-kombat/1252965-mortal-kombat-x/'
HEADERS= {'user-agent':'Mozilla / 5.0 (Windows NT 10.0; WOW64) AppleWebKit / 537.36 (KHTML, like Gecko) Chrome / 80.0.3987.132 YaBrowser / 20.3.2.242 Yowser / 2.5 Safari / 537.36'}

def get_html (url, params=None):
    r = requests.get(url,headers=HEADERS, params = params)
    return r

def get_content(html):
    soup= BeautifulSoup(html,'html.parser')
    items= soup.find_all('div', class_='centerCon fl')
    player=[]
    for item in items:
        player.append({
            'title': item.find('div', class_='date').get_text(),
        })
    print(player)
def parse():
    html = get_html(URL)
    if html.ok:
        get_content(html.text)
    else:
        print('Ошибка в запросе')


parse()

Comments

[DevMan]

Ernest123 подсветка кода? не, не слышал!!!11адын хинт: кнопка < / > в редакторе.

[galaxy]

Потому что BeautifulSoup не умеет javascript?

[Эрнест Варданян]

DevMan, там где ошибка или про что ты?Я новичок, чего ты хочешь)

[Эрнест Варданян]

galaxy, galaxy, а по подробнее, я вроде парсинг делаю html код или я не понял тебя?

[DevMan]

Ernest123, я вроде русским по светлому пишу, не?
когда пишешь вопрос в редакторе есть специальная кнопка для кода.
и правки твоих вопросов должны были натолкнуть тебя на эту мысль.

[Эрнест Варданян]

DevMan, увидел, спасибо, учту

[galaxy]

То, что вы хотите спарсить, создается динамически через javascript

[Эрнест Варданян]

galaxy, такое нужно ток через селениум?

Answer 1

[Алан Гибизов]

Как я понимаю, страничка URL должна таки открываться и обычным браузером. У меня не открывается. Может, потому и ошибка?
Вы попробуйте вместо этого вашего морталкомбата для начала открыть ченьть попроще.

Comments

[Эрнест Варданян]

Так он открывает обычные странички, я ввёл даже этот сайт в поисковик и он спокойно открыл, может проблемы у вас с открытием. парсил главную их страницу, всё выходит

[Алан Гибизов]

Ernest123,



Ну, по крайней мере этот странный адрес не пингуется ни от меня, ни с 2whois

[Эрнест Варданян]

Алан Гибизов, сам открыл через гугл и не вышло, а яндекс к примеру всё открывает, ну я вас понял

Answer 2

[Robot205]

попробуй через Selenium

Comments

[Эрнест Варданян]

Можешь, пожалуйста, коротко дать понять разницу между ним и requests

[Robot205]

где-то читал что bs4 с динамическим сайтом не работает, с ними советуют чз селениум