Идет парсинг Гугл поиска. В один не прекрасный момент появляется рекапча 2. Идет попытка (платным сервисом, не вручную, прокси платные, объемы парсинга крупные) разгадать капчу.
Сервис гадания возвращает токен и с полученным токеном идет post запрос, чтобы после редиректами и гетами получить заветную куку GOOGLE_ABUSE_EXEMPTION которая говорит, что капча успешно пройдена и можно парсить далее, пока не будет новой капчи.
Но кука не приходит.
Кто с таким сталкивался? Что можно придумать?
Разбор запросов что куда и как отправляется можно не предлагать, так как это было сделано и результатов добиться не удалось.
Вручную получить куку и подставить. Так-же надо помнить, что гугл трекает все запросы и оценивает поведение пользователя. Что он делает на сайте, куда ходит и тд. Если кратко, то разгадывать надо под тем-же ip и той-же машиной, с которой идут запросы на поиск.
profesor08, спасибо за совет, но тут речь исключительно и только про парсинг выдачи Гугл т.е. делает запрос по типу https://www.google.com/search?q=вопрос и в какой-то момент Гугл отдает рекапчу v2. Ее решает сервис и возвращает токен, я его отправляю по адресу вида https://www.google.com/sorry/index?q=специальный параметр как получить известно&continue=урл куда перенаправить когда все ок&g-recaptcha-response=токен. И в ответ на данный post запрос должен быть редирект и далее получение куки, но этого нет и идет неприятное сообщение, которое говорит о не прохождении капчи но ТОЛЬКО на поиске, никаких других сайтов тут нет.
Ставить вручную, получать и после ставить и другие варианты тут не срабатывают.
Может есть некий дельный и более точный совет или не было у вас дел с рекапчей именно на поиске Гугла? Я полностью и имитирую и без проблем прохожу все варианты капч, в том числе тестовую от Гугла: https://www.google.com/recaptcha/api2/demo
И там нет никаких трудностей с рекапчей 2, как и на любом сайте, где есть данная капча.
А именно и исключительн на поиске Гугл ни один подход не сработал.
Я понимают, что теоритически все имитировать ПОЛНОСТЬЮ и смотреть что да куда идет, но практически это не срабатывает ТОЛЬКО на поиске, а везде срабатывает.
на поиске все позащищеннее, считайте, что "везде" не существует, вам нужно вручную выполнить 10-20 запросов под разными браузерами, с разным темпом выполнения и потом подумать, КАК Гугл определяет робота
гуглу то на капчу пофиг
он видит что ее разгадали
но он видит робота ), а надо чтобы видел живого юзера
dimonchik2013, подобные эксперименты были проделаны, поэтому и обращаюсь с вопросом - как определяет Гугл робот или не работ на поиске?
Нет, я не смог все еще найти точного решения и если есть опыт в данном вопросе по выдаче Гугла это будет очень приятная помощь, так как общие советы решить данный вопрос не помогают совсем никак.
