Каков оптимальный вариант стратегии относительно разгадывания капчи с прокси/без при парсинге поисковой выдачи Яндекса?
Есть допустим 100000 поисковых фраз, по которым надо спарсить поисковую выдачу из Яндекса. Берется какая нибудь программа, умеющая это делать (например Key Collector) и начинается процесс парсинга, но Яндекс подсовывает свою капчу и на ее распознание будут тратиться деньги в сервисах. Так за капчу может накапать некоторая сумма, а как ее можно максимально сократить? Может я чего то не знаю или как то не так настраиваю процесс парсинга и для капчи обязательно нужно задействовать прокси сервера (которые тоже стоят денег), или выставить многосекундную задержку между запросами, чтобы Яндекс не подсовывал капчу?
Допустим с одного аккаунта парсить 100000 запросов может растянуться на неделю. А для нескольких аккаунтов потребуется покупать прокси (иначе Яндекс что то заподозрит, если запросы с разных аккаунтов, но с одного ip, и опять же подсунет капчу).
Допускаю что возможно даже существуют варианты с помощью бесплатного ПО разгадывать капчу, но пока нашел только xevil, у которого бесплатная версия, как оказалось, капчу Яндекса не разгадывает, а платная стоит 14000 рублей и это никуда не годится при малых объемах.
Как на закапчованность проверяются аккаунты?
Прокси как то дороговато стоят - это везде такие цены на подходящие прокси?
100000 фраз будут парситься дня три круглосуточно с такими задержками и на 5 аккаунтах с 5 прокси.
В таком ритме аккаунт наверно не то что за дни, а за минуты или часы станет подозрительным в глазах Яндекса и почти сразу закапчуется?
На такой объем надо брать несколько тысяч проксей резидентных, капчу пробовать гадать софтом типо ксевил или камонстр если они умеют гадать капчу Яндекс, затраты фиксированные выходят
