Как настроить правильно парсинг с безголовым браузером?

Question

[almenovr]

<?php
require 'phpQuery.php';
require_once('vendor/autoload.php');

use HeadlessChromium\BrowserFactory;
use HeadlessChromium\Input\Mouse;
use HeadlessChromium\Communication\Connection;
use HeadlessChromium\Communication\Message;

$browserFactory = new BrowserFactory("C:\Program Files (x86)\Google\Chrome\Application\chrome.exe");
// starts headless chrome
$browser = $browserFactory->createBrowser([
    'headless'        => false,         // disable headless mode
    'windowSize' => [1920, 1000],
    'enableImages' => false,
    'sendSyncDefaultTimeout' => 30000000,
    'userDataDir' => 'C:\Users\rusya\Downloads\ospanel\domains\localhost\fbparser\www',
    'mouse' => false // will enable verbose mode
]);
$page = $browser->createPage();

$uri = 'https://www.facebook.com/groups/websarafan.ru/';
$page->navigate($uri)->waitForNavigation();

$evaluation = $page->evaluate('document.documentElement.innerHTML')->getReturnValue();
$doc = phpQuery::newDocument($evaluation);
$posts = $doc->find('.u_0_1m');
$browser->close();

echo $posts->length;

Не получается осуществить поиск классов на странице Facebook, что делаю не правильно?

Answer 1

[Dimonchik]

с головым все срабатывает?

Comments

[almenovr]

с головым нет, у фейсбука идет подгрузка Html скриптами, поэтому я имитирую пользователя.

[Dimonchik]

если запускать его не в скрытом режиме - получается или тоже нет? грузится обычный фейсбук?

[FanatPHP]

almenovr, а ты понял что тебя спросили вообще? что такое "головый" браузер?

[almenovr]

dimonchik2013, смысле? если 'headless' => true ?

[almenovr]

FanatPHP, обычный браузер, нет?

[Dimonchik]

almenovr, headless False

[almenovr]

dimonchik2013, все также работает

Answer 2

[Евгений]

Поставь headless true и посмотри что он там вообще открывает.
Также отдебаж переменную $evaluation, правильный ли там html.

Comments

[almenovr]

да правильны, возможно я не правильно использую библиотеку phpQuery, у меня несколько дивов с одним и тем же классом

[Евгений]

almenovr, phpquery довольно устаревшая либа, советую использовать что-то посвежее, например, https://github.com/Imangazaliev/DiDOM