Как еще парсить, все методы провалились?

Question

[alex-1917]

Что было испробовано:
менеджеры закачек (WinHTTrack, Download Master)
cURL
cURL + список прокси
cURL + комбинации заголовков
Самописка-расширение к Хрому
Запуск по одной странице в секунду, в минуту, ....
Голый браузер в ручном режиме)))
20-30 страниц успешно, дальше гугл-рекапча
Фантомджиэс не получилось запустить из-за хостинга. да и поможет ли...

Суть дела - получать в принципе общедоступные данные, для небольшого эксперимента.
Пациент: whois.com

Comments

[alex-1917]

снуппи тоже оказался слабоват на передок)))

Answer 1

[Иван Шумов]

Если у вас unix-based os то вы можете воспользоваться результатом вывода консольной команды whois

Answer 2

[eifory]

Я парсил логи микротика на предмет из каких мест идут подключения, пользовался api.whois.vu

Comments

[alex-1917]

видел, но по интересуемому срезу у них немного устаревшие данные

Answer 3

[Zettabyte]

получать в принципе общедоступные данные, для небольшого эксперимента.
Пациент: whois.com

Как еще парсить

Наверное, больше никак и это хорошо. Так и должна работать защита информации о пользователях.

Сомневаюсь, что вам самому бы понравилось, что кто-то собирает ваши данные, указанные при регистрации домена(-ов) для какого-то своего "небольшого эксперимента".

Те данные, которые вы считаете доступными "в принципе", доступны для использования в отдельных случаях, для конкретных доменов, а не для массового сбора.