Получение содержимого страницы

Question

[wcoder]

Здравствуйте!

Начальное условие: Имеется некая страница, содержимое которой генерирует JavaScript.

Вопрос: Как получить содержимое такой страницы, используя Curl и PHP.

Answer 1

[Константин]

1. nodejs

Comments

[Константин]

2. seleniumhq.org/

[wcoder]

2 — шикарно, но нет либы для PHP :(
Придется все-таки начать учить Ruby :)

[Константин]

А проблема-то в чём? В Selenium можно писать в PHP… Какое у Вас задание?

[Анатолий]

Действительно, а про селениум то я и забыл =) В его сторону тоже стоит посмотреть, возможно это выйдет даже проще всего.

[Константин]

pypi.python.org/pypi/selenium

Answer 2

[Анатолий]

Никак, содержимое генерится на клиенте. Вы можете лишь сэмулироать это действие, повторив то что делает JS. Есть тот же вебкит, он свободен и открыт, автоматизацию никто не отменял.

Comments

[Алексей Сундуков]

Случайно шупать для этих целей его не приходилось? Может не вебкит, а что-то другое?

[Сергей Протько]

Остальные варианты подойдут не больше чем свои поделки через WebKit. Задача сильно специфичная. По хорошему вам стоит разобраться как генерится контент на странице. Быть может чего и придумаете. Я вот помниться для одного проекта писал JS апишку для одного внутреннего продукта, который так же генерировал контент на клиенте, эту апишку подключал как юзер скрипт и дергал данные через нее. Тут как раз WebKit и использовал, но это было уже давно и я помню лишь суть.

[wcoder]

А есть PHP либы для работы в webkit?

Answer 3

[Vitali Borovik]

Если там ajax то нужно посмотреть на какой файл оно посылает запрос и с него брать результат.
Например с индекса страницы в скрипте делается запрос на some.php
$.ajax({
type: "POST",
url: "some.php",
data: "name=John&location=Boston",
})
А уже потом работайте с some.php

Answer 4

[wcoder]

к сожалению там не ajax — содержимое генерирует сам javascript без сторонних вызовов…

Answer 5

[wcoder]

Хех, нашел такую штуку

Comments

[Константин]

Да там реклама на виагру больше чем документация! O_O