Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
Даниил Дединец
@donko1
Изучаю python
Парсинг
Как можно обойти защиту сайтов?
Создаю парсер для сайта, нужно делать много запросов. Более 50 000. Где-то через 10-15 запрос кидает капчу и защиту. Как обойти? Парсер на selenium.
Вопрос задан
более трёх лет назад
158 просмотров
Комментировать
Подписаться
1
Простой
Комментировать
Facebook
Вконтакте
Twitter
Решения вопроса
0
Пригласить эксперта
Ответы на вопрос
1
12rbah
@12rbah
Вообще либо использовать несколько прокси, и если капча простая то можно порыться и найти штуку которая их может решать и выставить таймауты. А вообще зачем на сайт отсылать 50к запросов, для парсинга этого же явно много.
Ответ написан
более трёх лет назад
Комментировать
Нравится
Комментировать
Facebook
Вконтакте
Twitter
Ваш ответ на вопрос
Войдите, чтобы написать ответ
Войти через центр авторизации
Похожие вопросы
Парсинг
+1 ещё
Средний
Есть ли бесплатная возможность получить исторические данные мемкоинов в Solana DEX?
1 подписчик
вчера
31 просмотр
0
ответов
Парсинг
+1 ещё
Простой
Ошибка в коде парсера Ozon, что не так?
1 подписчик
26 июл.
162 просмотра
0
ответов
Парсинг
+1 ещё
Простой
Парсинг на Python при помощи tor?
1 подписчик
16 июл.
154 просмотра
3
ответа
Парсинг
+1 ещё
Простой
Datacol программа некоректно работает с прокси, вопрос почему?
1 подписчик
06 июл.
92 просмотра
0
ответов
Парсинг
+4 ещё
Простой
Как отловить фрейм с капчей?
1 подписчик
02 июл.
122 просмотра
0
ответов
JavaScript
+1 ещё
Простой
Как можно получить такой список ссылок?
1 подписчик
01 июл.
283 просмотра
0
ответов
Python
+1 ещё
Простой
Парсинг с помощью библиотеки requests для Python. Как указать параметр из API если в нем заключается недопустимое значение с точками?
1 подписчик
16 июн.
204 просмотра
2
ответа
Парсинг
Простой
Как сделать веб-скрейпинг сайта?
3 подписчика
09 июн.
1340 просмотров
3
ответа
Python
+1 ещё
Простой
Почему api золотого яблока блокирует все запросы?
1 подписчик
05 июн.
865 просмотров
2
ответа
Парсинг
+1 ещё
Простой
Как вызвать синтаксическую ошибку (намеренно) в мессенджерах без открытого ИК?
2 подписчика
16 мая
1212 просмотров
0
ответов
Показать ещё
Загружается…
Вакансии с Хабр Карьеры
C++ / Qt Разработчик
Алабуга
•
Москва
До 370 000 ₽
Phyton разработчик
Товеко
До 60 000 ₽
Go Developer (RnD)
AppMagic
До 5 000 $
Минуточку внимания
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама