Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
kopelev2000
@kopelev2000
Python
Парсинг
Selenium
Как спарсить данные с сайта, если сайт не даёт зайти с СНГ региона?
Надо спарсить некую информацию с сайта yad2.co.il , при попытке сделать это, выдаёт «Отказано в доступе», что при этом можно сделать?
Вопрос задан
более трёх лет назад
230 просмотров
1
комментарий
Подписаться
1
Простой
1
комментарий
Facebook
Вконтакте
Twitter
sudo rm -rf /
@MaxLevs
Можно на момент парсинга подрубать прокси на уровне oc.
Или непосредственно в той библиотеке, которой парсите.
Написано
более трёх лет назад
Решения вопроса
1
sudo rm -rf /
@MaxLevs
Для этого нужно использовать
прокси-сервер
.
Включить его можно как
на уровне ОС
(но тогда
все
ваши соединения будут проходить через него),
либо непосредственно
из скрипта
, используя инструменты той библиотеки, которой парсите.
Примеры:
Для Scrapy
Для Requests
Для Selenium
Ответ написан
более трёх лет назад
2
комментария
Нравится
2
2
комментария
Facebook
Вконтакте
Twitter
kopelev2000
@kopelev2000
Автор вопроса
Можете посоветывать какте нибудь бесплатные прокси?
Написано
более трёх лет назад
sudo rm -rf /
@MaxLevs
kopelev2000
, у меня не возникало надобности искать их.
Но в гугле первая ссылка на запросу "бесплатные прокси" даёт неплохой
список
.
Написано
более трёх лет назад
Пригласить эксперта
Ответы на вопрос
0
Ваш ответ на вопрос
Войдите, чтобы написать ответ
Войти через центр авторизации
Похожие вопросы
Python
+1 ещё
Простой
Есть ли способ, получать прямые ссылки на видео VK для скачивания на Python?
1 подписчик
25 июн.
177 просмотров
1
ответ
Python
+3 ещё
Простой
Извлечение таблиц со спецификациями из PDF чертежей металлоконструкций — решаемо? Или я встрял?
нет подписчиков
23 июн.
192 просмотра
2
ответа
Python
Простой
Как исправить игнорирование кода при импорте в python?
1 подписчик
23 июн.
131 просмотр
2
ответа
Python
+2 ещё
Простой
Как проверить что файл подписан конкретной (открепленной) ЭЦП?
1 подписчик
23 июн.
141 просмотр
0
ответов
Python
Простой
Почему зависает скрипт запущенный из Visual Studio Code?
2 подписчика
23 июн.
481 просмотр
1
ответ
Python
Простой
Почему не работает pydantic-settings SettingsConfigDict(yaml_file)?
1 подписчик
21 июн.
70 просмотров
2
ответа
Python
Простой
В чем ошибка при вызове import requests?
1 подписчик
21 июн.
120 просмотров
1
ответ
Python
+1 ещё
Средний
Как наводить прицел точно на персонажа?
2 подписчика
20 июн.
480 просмотров
2
ответа
Python
Простой
Еxe файл не воспроизводит музыку. Как решить проблему?
2 подписчика
19 июн.
457 просмотров
1
ответ
Python
Простой
Как ловить exceptions в библиотеке которую я не использую напрямую?
1 подписчик
18 июн.
147 просмотров
2
ответа
Показать ещё
Загружается…
Вакансии с Хабр Карьеры
backend developer (Python) intern
BCraft
от 500 до 1 500 $
Ведущий Python разработчик
Сбер
•
Москва
от 200 000 до 250 000 ₽
Python разработчик
ITK academy
•
Саратов
от 75 000 ₽
Минуточку внимания
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама