Необходимо через определенное количество времени делать сравнение по тем или иным поисковым запросам, у данного сервиса есть интерфейс для разработчиков?
Капча ничего не значит. есть же Антикапча и ей подобные сервисов(навскидку посчитал из популярных, набрал5 штук)
И у этих сервисов есть апи))
В основном программы которые специализируются на анализе ключевиков и так предусматривают распознавание капчи. https://anti-captcha.com/apidoc
aleksey_komyakov: а если использовать tor, то есть разные айпишки для разных запросов? По моему куда интереснее тема. Api директа в ней чёрт ногу сломить, буду парсить. Под nodejs найти бы все необходимые пакеты, а дальше все проще пареной репы
Kirill Kuznetsov: тор очень медленно работает и часто бажит при парсинге. т.е. часть данных может быть потеряна. Но если учтёте при парсинге, то думаю получится.
Сейчас парсил директ через кейколлектор: спарсил 809 запросов, для каждого определил 3 разных вида запросов. В итоге за всё время вылетело 24 капчи.
Спарсил к этим запросам статистику из Гугла и получил ещё 2 капчи.
В итоге потратил на капчу 2,5 цента Дешевле чем прокси...
Простой
