ThunderCat

Как спарсить выдачу гугла на 100 тыс. страниц?

Очень медленно и печально. Так как будут банить, капчить и всячески мешать, скорее всего сам сайт спарсить проще будет, защита наверняка будет слабее.

Есть ли какие-либо сервисы для этого?

Сомневаюсь. Утверждать не буду, но лично не встречал. Разве что локальные программы по типу HT Track, но проблемы те же - будут блочить.

Пишите в тех. поддержку, описывайте ситуацию, быстрого ответа не ждите, дело долгое и муторное... Возможно нужно будет повторить запрос несколько раз ((

Похоже сервер не отдает правильные заголовки, я например не вижу никакого упоминания что это xml. Ну или еще какая-то проблема, вот тут целая ветка кто как решал.

У людей на базе сервисов гугл есть целые црм с миллионами оборотами, и вот так в один момент можно потерять все БД по сделкам и клиентам и даже данные свои не забрать....

Да-да, точняк, свой номер только лохи указывают, пацаны свой номерок не палят всяким левым сервисам. А они нагло пользуются и отжимают бизнес у уважаемых людей...

ЗЫ: если не окончательно забанили - вот

Если у вас 2 и более заголовка h1 - гугл считает это ошибкой, т.к. хэ1 это заголовок страницы, далее все должно быть подзаголовками.

https://chrome.google.com/webstore/detail/myvocabu...
кто то уже сделал, повторяйте или пользуйтесь за так.

при создании объекта заносите его в массив, как получить слева панельку с объектами я думаю догадаетесь.

Очевидно заголовки, описания, хлебные крошки.

Какие конкретно? О массовых падениях скорее всего вы узнаете из топ новостей, а отдельные сервисы гугла распределены на достаточно большое количество машин, которые перераспределяют между собой нагрузку. При падении 1-5 машин вы этого никак понять или заметить не сможете. Скорее будет проблема с магистралями до серверов, или с днс, или еще какая-то проблема локального характера. Крупные компании страхуют риск отказа в доступе достаточно серьезно.

В гугле? Или я глупость сболтнул? Или нет?

Обычно "не работает" имеет симптомы,
что выдает консоль ошибок?
пишется ли ваше console.log("321"); или до него не доходит?
где кусок кода до вызова и после вызова? Может сюда вообще не доходит по каким-то ифам?
Перед и после обработчика добавьте console.log("start"); console.log("end");, будет хоть понятно доходит сюда код или нет.