Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
kopelev2000
@kopelev2000
Python
Парсинг
Selenium
Как спарсить данные с сайта, если сайт не даёт зайти с СНГ региона?
Надо спарсить некую информацию с сайта yad2.co.il , при попытке сделать это, выдаёт «Отказано в доступе», что при этом можно сделать?
Вопрос задан
более трёх лет назад
230 просмотров
1
комментарий
Подписаться
1
Простой
1
комментарий
Facebook
Вконтакте
Twitter
sudo rm -rf /
@MaxLevs
Можно на момент парсинга подрубать прокси на уровне oc.
Или непосредственно в той библиотеке, которой парсите.
Написано
более трёх лет назад
Решения вопроса
1
sudo rm -rf /
@MaxLevs
Для этого нужно использовать
прокси-сервер
.
Включить его можно как
на уровне ОС
(но тогда
все
ваши соединения будут проходить через него),
либо непосредственно
из скрипта
, используя инструменты той библиотеки, которой парсите.
Примеры:
Для Scrapy
Для Requests
Для Selenium
Ответ написан
более трёх лет назад
2
комментария
Нравится
2
2
комментария
Facebook
Вконтакте
Twitter
kopelev2000
@kopelev2000
Автор вопроса
Можете посоветывать какте нибудь бесплатные прокси?
Написано
более трёх лет назад
sudo rm -rf /
@MaxLevs
kopelev2000
, у меня не возникало надобности искать их.
Но в гугле первая ссылка на запросу "бесплатные прокси" даёт неплохой
список
.
Написано
более трёх лет назад
Пригласить эксперта
Ответы на вопрос
0
Ваш ответ на вопрос
Войдите, чтобы написать ответ
Войти через центр авторизации
Похожие вопросы
Python
+1 ещё
Простой
Как создать параметризированный SQL запрос через pyodbc к Mysql?
нет подписчиков
16 часов назад
75 просмотров
2
ответа
Python
+1 ещё
Простой
Как сделать экранирование символов в Python для SQL запроса?
1 подписчик
19 часов назад
90 просмотров
1
ответ
Python
Простой
Что можно ускорить в коде решателя игры крестики нолики?
1 подписчик
вчера
136 просмотров
0
ответов
Python
Простой
Как подключиться по SMTP к Reg ru?
1 подписчик
вчера
122 просмотра
0
ответов
Python
+1 ещё
Простой
Как имитировать нажатие пкм в неактивное окно DirectX?
1 подписчик
вчера
38 просмотров
1
ответ
Python
+1 ещё
Простой
Как настроить группы при создании нового пользователя в битриксе?
1 подписчик
14 авг.
110 просмотров
0
ответов
Python
+1 ещё
Простой
При добавления строчки @commands.has_permissions в терминале при запуске выдает ошибку?
1 подписчик
14 авг.
86 просмотров
0
ответов
Парсинг
Простой
Как анти-бот системы определяют ботов и как от них защищаться?
1 подписчик
13 авг.
177 просмотров
1
ответ
Python
+1 ещё
Простой
Можно ли отключить SSL сертификат при парсинге?
1 подписчик
13 авг.
127 просмотров
0
ответов
Парсинг
Простой
Как или чем скачать закодированные изображения, под заглушкой?
1 подписчик
11 авг.
110 просмотров
2
ответа
Показать ещё
Загружается…
Вакансии с Хабр Карьеры
Ведущий Python разработчик
Сбер
•
Москва
от 200 000 до 250 000 ₽
Python Developer
Nomadic Soft
от 2 800 до 3 200 $
Python-разработчик (Senior)
BCraft
от 3 500 до 4 500 $
Минуточку внимания
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама