Почему не удаётся получить json и выдаёт ошибку 403?

Question

[Георгий Харитонов]

Мне для телеграмм бота нужно спарсить этот сайт https://query2.finance.yahoo.com/v10/finance/quote..., каазлось бы json, ничего трудного. Но почему-то обычный

res = requests.get('https://query2.finance.yahoo.com/v10/finance/quoteSummary/AAPL?modules=price&format=json')
return res.json()

не работает. Полез в интернет нашёл следующий ответ:

res = requests.get(f"https://query2.finance.yahoo.com/v10/finance/quoteSummary/AAPL?modules=price&format=json")
encoded_response = json.dumps(res.text)
output = json.loads(encoded_response)
return output

Тоже не работает. Добавив в этот код строчку
print(res)
Я увидел, что оказывается HTTP код, оказался 403. Хотя с самого компьютера я могу зайти на эту страницу и не токен ничего не нужно. Помогите, пожалуйста!

Comments

[Сергей Горностаев]

Вероятно, Yahoo защищатеся от парсинга.

Answer 1

[Игорь Маркин]

Нужно в запрос добавить человеческие заголовки, юзер-агента и всё такое. Чтобы сервер не считал тебя ботом.

Как добавить

Что добавить

Comments

[Сергей]

а чем строка плоха? )