Как эмулировать браузер на php?

Question

[germn]

Что нужно:

1) Эмулировать запросы, загрузку и выполнение js на страницах, поддержку кук.
2) Управление запросами и полученными данными на сервере, например, с помощью того же php.

Хотелось бы простоты, подобной тому же curl'у (он, естественно, не подходит сам по себе, так как не работает с js).

Есть что-то подобное, хабравчане?

Answer 1

[Yuri Shikanov]

Полностью на php не знаю, но можно взаимодействовать с selenium или phantomjs.

Answer 2

[rPman]

Не надо мучиться, напишите на моно простейшее консольное приложение использующее штатный контрол WebBrowser (при запуске под mono используется firefox), и пишите всю логику на javascript, запуская тут же на этой же странице на onload (точнее его аналог события на контроле).
Оно действительно получается очень простым, вся логика влезает в javascript с использованием jquery (его можно грузить в отличный от '$' идентификатор). И при этом запускается такое приложение на любом самом дешевом vps linux.

Я думаю между этим приложением и своим на php обмен сообщениями осилите c простейшими push ajax запросами или даже websocket?

Answer 3

[Никита Гусаков]

github.com/symfony/BrowserKit — вот такая штука, но нет js интерпритатора

Answer 4

[taviscaron]

selenium webdriver поможет

Answer 5

[Степан]

Если Вам полную эмуляцию с аяксом и всеми плюшками, то
xvfb+firefox+mozrepl с которым уже и можно общаться через php.

Comments

[Андрей Буров]

xvfb+webkit(qt)<->php

Answer 6

[AFoST]

Может, какой-нибудь jasmine (юнит-тесты) + sinon\mockjax (эмуляция ответов)?

Answer 7

[Олег Барабанов]

Системный вызов в безоконном режиме node-webkit.

Answer 8

[Олександр Бричук]

Еще вариант, использовался на production MynaJs+HtmlUnit

www.mynajs.org/site/index.ejs
htmlunit.sourceforge.net/

Answer 9

[Олександр Бричук]

PHP запрашивал то что ему нужно в MynaJs GET запросом, а последний возвращал JSON.

Answer 10

[Хазрат Гаджикеримов]

То что ты ищешь! SNOOPY

Answer 11

[smileonl]

На php не получится. Используйте phantomjs.org/

Answer 12

[klimzp]

Кто-нибудь вот этим - www.simpletest.org/en/browser_documentation.html пользовался??

Answer 13

[dimatelegin]

nightmare под node js

1) сохраняете станицы, получающиеся после выполнения на них js-скриптов в файлы
2) и потом уже с помощью php или любого другого языка программирования обрабатываете эти файлы и делаете с ними, что хотите