Как заставить работать парсер?

Question

[heavig2]

Всем привет.
Пытаюсь спарсить сайт связного, в ответ приходит это -
Как я понимаю, срабатывает защита. Как его можно обойти? В какую сторону копать?

Comments

[Исрапил Ахмедов]

Покажи свой запрос, с какими хэдерами ты обращаешься к сервису?

Answer 1

[Денис Ильиных]

так начните с анализа запросов к сайту ,
подделайте полностью их все и получите хотя бы главную страницу
дальше смотрите, используются ли куки , используется ли яваскрипт и прочее
на сайте много яваскрипта обфусцированного , сидите расшифровывайте.

или используйте PhantomJS или Selenium технологии которые позволяют рендерить явакрипт и вы получите тот самый нужный вам хтмл