Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
kopelev2000
@kopelev2000
Python
Парсинг
Selenium
Как спарсить данные с сайта, если сайт не даёт зайти с СНГ региона?
Надо спарсить некую информацию с сайта yad2.co.il , при попытке сделать это, выдаёт «Отказано в доступе», что при этом можно сделать?
Вопрос задан
более трёх лет назад
229 просмотров
1
комментарий
Подписаться
1
Простой
1
комментарий
Facebook
Вконтакте
Twitter
sudo rm -rf /
@MaxLevs
Можно на момент парсинга подрубать прокси на уровне oc.
Или непосредственно в той библиотеке, которой парсите.
Написано
более трёх лет назад
Решения вопроса
1
sudo rm -rf /
@MaxLevs
Для этого нужно использовать
прокси-сервер
.
Включить его можно как
на уровне ОС
(но тогда
все
ваши соединения будут проходить через него),
либо непосредственно
из скрипта
, используя инструменты той библиотеки, которой парсите.
Примеры:
Для Scrapy
Для Requests
Для Selenium
Ответ написан
более трёх лет назад
2
комментария
Нравится
2
2
комментария
Facebook
Вконтакте
Twitter
kopelev2000
@kopelev2000
Автор вопроса
Можете посоветывать какте нибудь бесплатные прокси?
Написано
более трёх лет назад
sudo rm -rf /
@MaxLevs
kopelev2000
, у меня не возникало надобности искать их.
Но в гугле первая ссылка на запросу "бесплатные прокси" даёт неплохой
список
.
Написано
более трёх лет назад
Пригласить эксперта
Ответы на вопрос
0
Ваш ответ на вопрос
Войдите, чтобы написать ответ
Войти через центр авторизации
Похожие вопросы
Python
Простой
Как мне исправить код?
1 подписчик
29 мар.
2158 просмотров
2
ответа
Python
+1 ещё
Простой
Как добавить кнопку к пересылаемому сообщению?
1 подписчик
28 мар.
155 просмотров
1
ответ
Python
Средний
Как получить код авторизации через ЕСИА?
2 подписчика
28 мар.
205 просмотров
0
ответов
HTML
+2 ещё
Простой
Как просмотреть скрытый sitemap.xml?
1 подписчик
27 мар.
132 просмотра
2
ответа
Python
Простой
В асинхронной функции при создании массива он будет асинхронным или обычным python?
2 подписчика
26 мар.
2047 просмотров
5
ответов
Selenium
+2 ещё
Простой
Есть ли вариант обхода CloudFlare waiting room?
3 подписчика
26 мар.
2084 просмотра
1
ответ
Python
+2 ещё
Простой
Почему Linux забил на --user-data-dir при запуске Selenium?
1 подписчик
25 мар.
205 просмотров
1
ответ
Python
Простой
Как сделать удаляющиеся сообщения в боте?
1 подписчик
24 мар.
137 просмотров
0
ответов
Python
Простой
Как отправить кружок в телеграм через telethon с помощью file_id?
1 подписчик
23 мар.
100 просмотров
1
ответ
Парсинг
Простой
Как получить значение атрибута в PHP Simple HTML DOM Parser?
1 подписчик
23 мар.
41 просмотр
1
ответ
Показать ещё
Загружается…
Вакансии с Хабр Карьеры
Старший Python разработчик/Senior Python developer
Платежное решение
•
Москва
До 300 000 ₽
Руководитель группы разработки Python/Tech Lead Python
Платежное решение
•
Москва
До 500 000 ₽
Python developer
Greenway Global
•
Новосибирск
от 150 000 ₽
Минуточку внимания
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама