Задать вопрос
@calamandor
парсинг

CodeForces добавил защиту от парсинга?

Недавно парсил сайт codeforces на bs4, две недели назад такой же код выдает response 403, из-за чего может быть ошибка? Я думал, что сайт добавил антипарсер, но ведь он на плаву уже 10 лет. Кто знает, пожалуйста помогите
  • Вопрос задан
  • 51 просмотр
Комментировать
Подписаться 1 Простой Комментировать
Пригласить эксперта
Ответы на вопрос 1
Mike_Ro
@Mike_Ro
Python, JS, WordPress, SEO, Bots, Adversting
$ curl https://codeforces.com/
<!DOCTYPE html><html lang="en-US"><head><title>Just a moment...</title><meta http-equiv="Content-Type" content="text/html; charset=UTF-8"><meta http-equiv="X-UA-Compatible" content="IE=Edge">

Первый ответ сервера (а bs4 в большее и не умеет), возвращает среди прочего < title>Just a moment... title>, уже как бы намекая, что там что то происходит... Защита может быть элементарной, но не видя Ваш код, говорить о решение не приходится.
Ответ написан
Комментировать
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы
Вакансии с Хабр Карьеры
Разработчик фронтенда в Конструктор лендингов
Яндекс • Екатеринбург
от 220 000 до 350 000 ₽
Разработчик в Yandex DevPlatform
Яндекс • Москва
от 270 000 до 400 000 ₽
Server Engineer
Wanted.
До 8 000 $
Ещё вакансии
Заказы с Хабр Фриланса
Делать красивые презентации и каталоги в сфере комм. недвижимости
27 сент. 2024, в 01:55
30000 руб./за проект
Увеличить кол-во входных токенов в работающей Open source TTS модели
27 сент. 2024, в 00:11
6000 руб./за проект
Create Header and Fingerprint for Cloud Flare
26 сент. 2024, в 23:02
3000 руб./за проект
Ещё заказы