Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
Даниил Дединец
@donko1
Изучаю python
Парсинг
Как можно обойти защиту сайтов?
Создаю парсер для сайта, нужно делать много запросов. Более 50 000. Где-то через 10-15 запрос кидает капчу и защиту. Как обойти? Парсер на selenium.
Вопрос задан
более трёх лет назад
158 просмотров
Комментировать
Подписаться
1
Простой
Комментировать
Facebook
Вконтакте
Twitter
Решения вопроса
0
Пригласить эксперта
Ответы на вопрос
1
12rbah
@12rbah
Вообще либо использовать несколько прокси, и если капча простая то можно порыться и найти штуку которая их может решать и выставить таймауты. А вообще зачем на сайт отсылать 50к запросов, для парсинга этого же явно много.
Ответ написан
более трёх лет назад
Комментировать
Нравится
Комментировать
Facebook
Вконтакте
Twitter
Ваш ответ на вопрос
Войдите, чтобы написать ответ
Войти через центр авторизации
Похожие вопросы
Парсинг
Простой
Как анти-бот системы определяют ботов и как от них защищаться?
1 подписчик
13 авг.
202 просмотра
1
ответ
Python
+1 ещё
Простой
Можно ли отключить SSL сертификат при парсинге?
1 подписчик
13 авг.
146 просмотров
0
ответов
Парсинг
Простой
Как или чем скачать закодированные изображения, под заглушкой?
1 подписчик
11 авг.
119 просмотров
2
ответа
Парсинг
+1 ещё
Средний
Есть ли бесплатная возможность получить исторические данные мемкоинов в Solana DEX?
1 подписчик
30 июл.
53 просмотра
0
ответов
Парсинг
+1 ещё
Простой
Ошибка в коде парсера Ozon, что не так?
1 подписчик
26 июл.
225 просмотров
0
ответов
Парсинг
+1 ещё
Простой
Парсинг на Python при помощи tor?
1 подписчик
16 июл.
180 просмотров
3
ответа
Парсинг
+1 ещё
Простой
Datacol программа некоректно работает с прокси, вопрос почему?
1 подписчик
06 июл.
99 просмотров
0
ответов
Парсинг
+4 ещё
Простой
Как отловить фрейм с капчей?
1 подписчик
02 июл.
129 просмотров
0
ответов
JavaScript
+1 ещё
Простой
Как можно получить такой список ссылок?
1 подписчик
01 июл.
291 просмотр
0
ответов
Python
+1 ещё
Простой
Парсинг с помощью библиотеки requests для Python. Как указать параметр из API если в нем заключается недопустимое значение с точками?
1 подписчик
16 июн.
213 просмотров
2
ответа
Показать ещё
Загружается…
Вакансии с Хабр Карьеры
C++ / Qt Разработчик
Алабуга
•
Москва
До 370 000 ₽
Phyton разработчик
Товеко
До 60 000 ₽
Специалист по техническому сопровождению клиентов (2 линия)
FoodSoul
•
Калининград
от 60 000 ₽
Минуточку внимания
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама