Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
kopelev2000
@kopelev2000
Python
Парсинг
Selenium
Как спарсить данные с сайта, если сайт не даёт зайти с СНГ региона?
Надо спарсить некую информацию с сайта yad2.co.il , при попытке сделать это, выдаёт «Отказано в доступе», что при этом можно сделать?
Вопрос задан
более трёх лет назад
231 просмотр
1
комментарий
Подписаться
1
Простой
1
комментарий
Facebook
Вконтакте
Twitter
sudo rm -rf /
@MaxLevs
Можно на момент парсинга подрубать прокси на уровне oc.
Или непосредственно в той библиотеке, которой парсите.
Написано
более трёх лет назад
Решения вопроса
1
sudo rm -rf /
@MaxLevs
Для этого нужно использовать
прокси-сервер
.
Включить его можно как
на уровне ОС
(но тогда
все
ваши соединения будут проходить через него),
либо непосредственно
из скрипта
, используя инструменты той библиотеки, которой парсите.
Примеры:
Для Scrapy
Для Requests
Для Selenium
Ответ написан
более трёх лет назад
2
комментария
Нравится
2
2
комментария
Facebook
Вконтакте
Twitter
kopelev2000
@kopelev2000
Автор вопроса
Можете посоветывать какте нибудь бесплатные прокси?
Написано
более трёх лет назад
sudo rm -rf /
@MaxLevs
kopelev2000
, у меня не возникало надобности искать их.
Но в гугле первая ссылка на запросу "бесплатные прокси" даёт неплохой
список
.
Написано
более трёх лет назад
Пригласить эксперта
Ответы на вопрос
0
Ваш ответ на вопрос
Войдите, чтобы написать ответ
Войти через центр авторизации
Похожие вопросы
Python
Простой
Дублирование логов в python logging?
2 подписчика
9 часов назад
108 просмотров
1
ответ
Python
+1 ещё
Простой
Pycharm для старенького мака??
1 подписчик
вчера
154 просмотра
3
ответа
Python
+1 ещё
Средний
Как сделать чтоб аккаунт писал при подписке на канал?
1 подписчик
16 окт.
109 просмотров
0
ответов
Python
+1 ещё
Простой
Какие есть простые легковесные LLM для локального использования?
2 подписчика
14 окт.
508 просмотров
2
ответа
Python
+1 ещё
Сложный
Как автоматизировать работу с сайтом используя Camoufox библиотеку?
2 подписчика
14 окт.
103 просмотра
0
ответов
Python
+1 ещё
Простой
FastAPI Prometheus_fastapi_instrumentator где мне следует разместить?
1 подписчик
09 окт.
139 просмотров
1
ответ
Python
+1 ещё
Простой
Пытаюсь пропустить число 10 двумя способами.(правильный второй код) Почему эти два кода дают разный результат?
1 подписчик
09 окт.
521 просмотр
2
ответа
Python
+2 ещё
Простой
В каком слое DTO объект преобразовывать в словарь перед сохранением в БД?
1 подписчик
08 окт.
141 просмотр
2
ответа
Python
+1 ещё
Простой
Visual Studio Code Имя «pipenv» не распознано как имя командлета?
1 подписчик
08 окт.
119 просмотров
1
ответ
Python
+2 ещё
Простой
Как реализовать асинхронность + многопоточность одновременно?
5 подписчиков
08 окт.
544 просмотра
1
ответ
Показать ещё
Загружается…
Вакансии с Хабр Карьеры
Python Developer
Strikt
от 100 000 до 150 000 ₽
Python разработчик
ITK academy
•
Казань
от 75 000 ₽
Python разработчик
Космос Про Медиа
•
Москва
от 180 000 до 200 000 ₽
Минуточку внимания
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама