Пытаюсь спарсить страницу, на которой часть нужного мне контента генерируется JS. Решил попробовать отследить запрос и получить ответ и его уже разбирать, то есть парсить уже не страницу, а ответ запроса. На одном сайте новостном сайте нашел все без проблем, а вот на других не могу. Собственно вопрос: как правильно отследить и получить ответ от запроса?
"Отследить запрос" - втф? Получить страницу-то Вы можете, но это не даст ничего, если контент грузится средствами JS. Вам нужен эмулятор браузера средствами сервера (phantomjs/BrowserExt/google it) или встроенный в целевой сайт RSS канал/REST api для выгрузки данных.