Написал приложение, для работы которого требуется парсить некоторый сайт. Сайт этот блокирует ip-адреса при частом обращении. То есть несколько раз всё хорошо с работало, а потом приходит страничка, на которой написано "с вашего ip-адреса слишком часто обращались, вводи капчу". Приложение стоит на VPS на ubuntu. Поставил туда toriptables2.
Запускаю тор, пишут ваш новый айпи адрес такой-то. Запускаю приложение - держи блокировку. Меняю адрес, тор пишет адрес поменялся на такой-то, снова запускаю приложение, но сайт всё равно говорит, с твоего адреса часто обращались, хотя я его секунду назад поменял. Почему это происходит? И как нормально менять адрес, чтобы такого не происходило?
а потом приходит страничка, на которой написано "с вашего ip-адреса слишком часто обращались, вводи капчу".
Логично - вы же через TOR работаете - так и должно быть.
Во первых с выходных нод TOR постоянно кто-нибудь парсит, во вторых у многих ресурсов ноды TOR занесены в черный список.
И как нормально менять адрес, чтобы такого не происходило?
Используйте "чистые" прокси, которыми кроме вас никто не пользуются. Они конечно и стоят дорого, зато никакой капчи.
