Как спарсить название и цену игры в стиме?

Question

[Максим Samonov]

ВОТ МОЙ КОД

from bs4 import BeautifulSoup as BS
import requests

soup1 = BS(requests.get('https://store.steampowered.com/specials/?l=russian#p=0&tab=TopSellers').text, 'html.parser')

skidki1 = soup1.findall(class='tab_item_name')

for item1 in skidki1:
    s = print(item1.text)

price = soup1.findall(class='discount_final_price')

for pr in price:
    p = print(pr.text)

hz = print(s , p)
for hg in hz:
    print(hg.text)

Возможно ли спарсить это так, чтобы около названия игры выдавалась ее цена, и если да, то как?
P.S. Мой код выдает ошибки.

Comments

[Игорь Маркин]

Какие ошибки выдаёт код?

[Максим Samonov]

Игорь Маркин, Traceback (most recent call last):
File "e:\Python\combot\steamparser.py", line 17, in
for hg in hz:
TypeError: 'NoneType' object is not iterable

[Игорь Маркин]

За что отвечает эта строка?
hz = print(s , p)

[Максим Samonov]

Игорь Маркин, я думал, что это будет работать так, что типо сначала пишется игра а потом ее цена. но как я понимаю, мой код - говно. можешь сказать, а реально ли реализовать мои требования?

[Александр Катунин]

Ошибка в том, что в некоторых товарах нет скидки, следовательно NoneType. Надо создать обработчик ошибок. Внизу готовый код, пользуйся)

from bs4 import BeautifulSoup
import requests


url = 'https://store.steampowered.com/specials/?l=russian#p=0&tab=TopSellers'

response = requests.get(url=url).text

#with open('index.html', 'w', encoding='utf-8') as file:
#    file.write(response)

soup = BeautifulSoup(response, 'lxml')

all_games = soup.find_all('a', class_='tab_item')

result_list = []

for item in all_games:
    name = item.find('div', class_='tab_item_name').text.strip()
    price_final = item.find('div', class_='discount_final_price').text.strip()
    try:
        sale = item.find('div', class_='discount_pct').text.strip()
    except:
        sale = 'отсутствует'

    result_list.append({
        'name': name,
        'price': price_final,
        'sale': sale
    })

[Максим Samonov]

Александр Катунин, код почему-то при запуске, выдает только: &

[Александр Катунин]

Максим Samonov, так, со списками и словарями работали?)
Припиши это в конце - увидишь магию в консоли)

for item in result_list:
    print(item['name'])
    print(item['price'])
    print(item['sale'])
    print('-------------------')

[Максим Samonov]

Александр Катунин, чел, я не знаю кто ты, но хочу от всей души поблагодарить тебя. сам я нуб в этом деле, и без тебя скорее всего не решил бы эту проблему.

[Александр Катунин]

Максим Samonov, в таком случае советую канал по парсингу)
Все подробно и без воды

Answer 1

[rPman]

Зачем столько гемороя если есть официальное api?
api.steampowered.com/ISteamApps/GetAppList/v0001 - список всех приложений
store.steampowered.com/api/appdetails?appids=43864... - информация о приложении appids, код страны из которой запрос - cc
цены в центах [App Id] > data > price_overview
(взял это отсюда)

По уму документация тут, ллидербоард тут

Answer 2

[Николай Савельев]

P.S. Мой код выдает ошибки.

Какие ошибки выдаёт?

Comments

[Максим Samonov]

Traceback (most recent call last):
File "e:\Python\combot\steamparser.py", line 17, in
for hg in hz:
TypeError: 'NoneType' object is not iterable

[Максим Samonov]

@Agent Smith, суть в том, что весть код то этой ошибки работает.

[Влад Григорьев]

Максим Samonov, ну тут для начала надо учить основы питона, прежде чем писать парсеры
функция принт возвращает None и логично что ничего нельзя итерировать