Ответы пользователя по тегу Proxy
  • Как парсить сайты с защитой от парсинга?

    Jump
    @Jump
    Системный администратор со стажем.
    То что вы называете защитой от парсинга - банальный JS.
    Часть данных приходит к вам в виде html, а остальные данные запрашивают JS скрипты в вашем браузере.
    Если вы не исполняете скрипты - вы не получаете эти данные.

    Гарантированный метод - парсить через браузер.
    Запускаете браузер, нужные скрипты исполняются, получаете данные.
    Для экономии ресурсов браузер можно запускать в headless режиме - без визуального отображения.
    Ответ написан
    Комментировать
  • Возможно ли настроить PAC скрипт на Mikrotik?

    Jump
    @Jump
    Системный администратор со стажем.
    Возможно ли настроить PAC скрипт на Mikrotik?
    На роутере скрипты настраивать неудобно, лучше с компьютера настраивайте. Но возможность конечно есть - микротик умеет работать с текстовыми файлами.

    есть ли возможность настройки прозрачного proxy сервера с использованием PAC скрипта на Mikrotik?
    Да, там есть встроенный прокси, нужные настройки можно скопировать из PAC скрипта.
    Ответ написан
  • Объясните пожалуйста разницу между VPN и PROXY. Это не одно и то же?

    Jump
    @Jump
    Системный администратор со стажем.
    PROXY - сервер посредник.
    VPN - Виртуальная частная сеть.
    Обычная сеть в качестве транспорта использующая другую сеть, например интернет.

    Объясните пожалуйста разницу между VPN и PROXY. Это не одно и то же?
    Объясните разницу между самолетом и экскалатором. Это же не одно и тоже. Хотя могут использоваться для одинаковых целей.
    Ответ написан
  • Почему на web-proxy Mikrotik долго отрабатывает deny, 403 Forbidden?

    Jump
    @Jump
    Системный администратор со стажем.
    Почему на web-proxy Mikrotik долго отрабатывает deny, 403 Forbidden?
    Потому что вы не правильно понимаете как это работает.
    Mikrotik просто уничтожает пакет, и больше ничего не делает.
    Он не имеет никакого отношения к 403 Forbidden.

    почему микротик так долго думает прежде чем вернуть 403?
    Потому что эту ошибку возвращает браузер, а не микротик! А микротик тут вообще не при делах.

    Вы дали задачу браузеру загрузить ресурс - он пытается это сделать.
    Но часть сайта не грузится - вы же заставили микротик дропать пакеты, и они тупо не доходят до браузера.
    Браузер ждет в надежде что может все получится и пакет придет, пытается отправить запрос повторно - но микротик по прежнему блокирует трафик, и в конце концов, браузер сдается, и сообщает вам что данный ресурс вывести не получается - 403.
    Ответ написан
  • Можно ли разрешить доступ к proxy cntlm, только с определенных ip адресов?

    Jump
    @Jump
    Системный администратор со стажем.
    Это без проблем делается в настройках файервола.
    UFW, iptables, брандмауэр виндовс, и аналогичные, не знаю какие там у вас.
    Ответ написан
    1 комментарий
  • Какие есть альтернативы tor/proxy при парсинге?

    Jump
    @Jump
    Системный администратор со стажем.
    Покупайте чистые прокси и не будет бана.

    есть-ли какие-то другие способы парсинга, кроме как через тор/прокси?
    Есть множество способов парсинга, и ни один из них не имеет никакого отношения ни тор, ни к прокси.

    Тор и прокси применяют либо для отправки запросов с другого адреса, либо для сокрытия своего IP адреса. К парсингу они никакого отношения не имеют. И используются только для этих целей.
    Ответ написан
    2 комментария
  • Можно ли через микротик настроить проксирование доменный имен?

    Jump
    @Jump
    Системный администратор со стажем.
    На микротике нет.
    Делается так - на микротике все отправляем на сервер1, на котором стоит nginx.
    И уже nginx смотрит с какого домена пришел ответ, и переправляет его либо на сервер1:порт, либо на сервер2.
    Ответ написан
    1 комментарий
  • Как перенаправить запрос?

    Jump
    @Jump Куратор тега Системное администрирование
    Системный администратор со стажем.
    Как перенаправить запрос?
    Не совсем понятно что за запрос, поэтому могут быть варианты.

    А вообще вот два элементарных варианта-
    • Создаем на роутере правило - все запросы на адрес x, отправлять на адрес y . По сути обычный маскарадинг.
      iptables -t nat -A PREROUTING --dst x.x.x.x -j DNAT --to-destination y.y.y.y
      ну и для обратного трафика правило SNAT

    • Ставим прокси, пускаем трафик софтины через него, и уже на прокси отлавливаем и подменяем нужные запросы

    Первый вариант самый простой и универсальный, но не умеет работать с доменными именами, не его уровень. Хотя извернутся можно.
    Второй вариант работает не со всеми видами трафика.
    Ответ написан
    Комментировать
  • Как использовать удалённый ПК как proxy (нет белого IP)?

    Jump
    @Jump
    Системный администратор со стажем.
    Попросите у своего провайдера белый IP - проводные провайдеры обычно без проблем раздают, ценник небольшой будете лишних 50-60рублей в месяц платить.
    Если невозможно - пробуйте Softether он во многих случаях может установить VPN соединение между двумя компьютерами за NAT используя свой релей.

    Если и так не получится - арендуете самый дешевый VPS сервер с белым IP, ставите на него тот же Softether - это уже гарантированно заработает.
    Ответ написан
    Комментировать
  • Как осуществить доступ через внешний IP на свои ресурсы, находящиеся внутри сети?

    Jump
    @Jump
    Системный администратор со стажем.
    есть статический белый айпи (к примеру: 10.0.0.1).
    Адрес в примере явно не белый.

    Как сделать так чтоб при обращение из интернета по домену aaa.test.com (10.0.0.1) этот домен пробрасовался во внутренний ip локальной сети.
    Никак. Домен это имя его пробросить нельзя.
    Пробрасывают порты. Можно сделать чтобы все запросы пришедшие на IP адрес перенаправлялись (пробрасывались) на другой IP адрес. Домен тут вообще ни при делах.

    Чтобы осуществить доступ к веб серверу за NAT нужен проброс портов с сервера где делается NAT на Web сервер.
    Если веб серверов несколько - используется прокси сервер.
    Ответ написан
  • Видит ли VPS-хостер мой траффик? Что видит провайдер при VPN-подключении?

    Jump
    @Jump
    Системный администратор со стажем.
    В Европе граждане защищены GDPR и никакому тащ майору ваши данные не уйдут до решения суда. Но в СНГ вроде всё совсем по другому работает.
    Не смешите мои тапки. Везде одинаково работает.
    Спецслужбы и те у кого есть деньги и связи получат данные тогда, когда нужно, если есть физическая возможность. Без всяких решений суда.

    1)Разумеется получает, А вот зашифрован или нет - неизвестно, кто же знает шифруете ли вы его.
    2)Может если захочет.
    3)Что вы пользуетесь интернетом. Ему в принципе пофиг что там вы делаете и как, лишь бы ему не мешали работать и деньги зарабатывать.
    Ответ написан
    Комментировать
  • Подключение в впн через прокси?

    Jump
    @Jump
    Системный администратор со стажем.
    Следовательно перейдем к эпилогу, как подключиться к впн серверу использую тор-прокси?
    Вы все сделали правильно - сами же сказали подключение проходит успешно. Задача выполнена.

    но траффик в виртуальную сеть не хочет идти
    Логично. С чего ему идти? В сетях в том числе и виртуальных трафик передается по протоколам TCP/IP - нужен маршрут в нужную сеть и трафик пойдет.
    Вы подключаетесь к сети по протоколу SOCKS это специализированный протокол для прозрачной персылки трафика через прокси и маршрутов там никаких нет и быть не может.
    Ответ написан
  • Почему запросы идут не к провайдеру?

    Jump
    @Jump
    Системный администратор со стажем.
    если мой запрос сначала идёт к провайдеру, ведь это так работает?
    Ваш запрос идет не к провайдеру, а по инфраструктуре провайдера.
    Т.е провайдер обеспечивает вам услуги по доставке вашего запроса.

    Я не пойму, какая анонимность может быть
    А с чего вы вообще взяли что анонимность должна быть??? Вы зарегистрировали подключение к сети, предъявив паспорт, ваш адрес известен. Эта услуга явно не предполагает анонимности.

    И если данные можно зашифровать, то домен, к которому обращаюсь, ведь не зашифруешь.
    Да без проблем, кто ж мешает зашифровать домен. Просто тогда провайдер не будет знать куда отправлять ваш запрос.

    Получается, я делаю запрос к провайдеру, мол вот прокси, сделай через него запрос
    Нет. вы просто указываете адрес прокси, а ваш провайдер пересылает данные по указанному адресу как всегда.

    Определенной анонимности можно достичь но это дорого и сложно.
    Взять тот же TOR - там шифруется все от тела пакета до заголовка - в итоге провайдеру неизвестен либо отправитель, либо о получатель, либо то и другое.
    Ответ написан
    Комментировать
  • Почему при подключении к разным сайтам у меня разные IP? Прокси провайдера?

    Jump
    @Jump
    Системный администратор со стажем.
    1)Вы сидите за натом провайдера, для каждого подключения выделяется выходной шлюз и порт. Если он будет меняться у вас авторизация будет слетать.
    2)Ему так удобно.
    3)Что значит смена IP? Его никак не поменяешь - откуда зашли такой и есть.
    Можно просто зайти с другого адреса.
    Ответ написан
    1 комментарий
  • Как повысить безопасность и анонимность своего ПК?

    Jump
    @Jump
    Системный администратор со стажем.
    как хотя бы немного повысить безопасность работы в сети
    Для начала нужно четко определить от каких именно опасностей вы хотите защитится. А то слишком уж непонятное определение.

    и добиться какой-никакой анонимности?
    Это сложно, и требует достаточно кропотливой настройки системы.
    Ну и естественно соблюдение основных правил - никаких посещений соцсетей и подобных ресурсов, нигде не указывать личные данные, и.т.д.
    Ответ написан
    1 комментарий
  • Как направить трафик из прокси подключенного к Proxifier в RDP?

    Jump
    @Jump
    Системный администратор со стажем.
    Никак.
    Во первых прокси работает с http протоколом, а не с RDP.
    Во вторых даже если бы он умел работать и пробрасывать порты - нужно его конфигурировать для этого.

    Покупайте свой VDS сервер и делайте и просто пробрасывайте порт на нужную машину в iptables
    Ответ написан
  • Как реализовать прокси на базе динамического IP?

    Jump
    @Jump Куратор тега Системное администрирование
    Системный администратор со стажем.
    В наличии имеется динамический "серый" ip от провайдера.
    Подключиться к серому IP адресу из внешней сети невозможно.
    Если хотите чтобы к вам подключались - берите белый адрес.

    Как можно размножить свой домашний IP?
    Непонятно что вы вообще хотите сделать.
    Создать у себя прокси сервер? Тогда при чем тут размножение IP ?
    Ходить на ресурсы через разные адреса - ну тогда находите прокси лист и ходите через разные прокси, но тогда непонятно при чем тут ваши адреса?
    Ответ написан
    Комментировать
  • Может ли "сайт" узнать, что я использую VPN или прокси-сервер? Как он выявляет это?

    Jump
    @Jump
    Системный администратор со стажем.
    Может ли «сайт» узнать, что я использую VPN или прокси-сервер? Как он выявляет это?
    Способа гарантированно определить использование VPN не существует.
    Но есть множество косвенных признаков по которым можно определить использование VPN.
    Например если вы заходите с IP адреса популярного VPN сервиса.
    Ответ написан
    Комментировать
  • Даст ли proxy-server прирост скорости в интернете?

    Jump
    @Jump
    Системный администратор со стажем.
    Нет.
    Пропускная способность разумеется будет не более минимальной пропускной способности на пути трафика.
    Поэтому при работе через прокси она либо не поменяется, либо снизится.

    Есть прокси серверы которые сжимают трафик - в результате удается передать больше данных при равной пропускной способности.
    Но во первых это только HTTP трафик, во вторых не весь трафик хорошо сжимается, в третьих сейчас почти везде https, ну и задержка увеличивается из-за дополнительного узла и обработки трафика.
    Ответ написан
    2 комментария
  • Что надежнее - прокси или VPN?

    Jump
    @Jump
    Системный администратор со стажем.
    Это разные технологии.
    Обе работают вполне надежно и выполняют свои задачи.
    Задача VPN организовать частную сеть, задача прокси - перенаправлять трафик.
    К смене IP они никакого отношения не имеют, хотя их можно использовать и для этого.

    И достаточно ли прокси или VPN + разный юзерагент для анонимности на форуме?
    Нет. Сами по себе ни прокси, ни VPN анонимность не обеспечивают.
    Если нужна анонимность предпринимают комплекс мер по обеспечению этой самой анонимности, используя разные инструменты для достижения цели, в том числе VPN, прокси, и кучу других программ и технологий.
    Ответ написан
    6 комментариев