Как забрать содержимое страницы?

Question

[T4-100]

Необходимо забрать содержимое страницы, но есть блоки на странице, в которых данные записываются через js, то есть нужно получить контент после выполнения всего js.

Например
Есть у нас блок, в котором указан некий рейтинг, но этот рейтинг появляется после того как страница будет загружена (через js подставляются данные)

Каким образом можно получить корректные данные?

Answer 1

[Сергей Протько]

Чисто на PHP - никак. Вам нужен полноценный браузер для этого. Посмотрите в сторону phantomjs, с его помощью можно програмно загрузить страницу, поставить таймаут в пол секунды (или сколько нужно что бы js отработал), и, так как у вас есть полный доступ к DOM, можно сразу там выковырять все данные и передать их куда дальше.

Comments

[T4-100]

Спасибо! Кажется это то, что нужно

Answer 2

[Eugene Obrezkov]

Самый быстрый костыль - используй setTimeout().
Псевдокод:

setTimeout(function() {
    getRating();
}, 5000);

За 5 секунд, думаю, всё что нужно уже должно загрузиться :)