Как обновить страницу для Simple_html_dom?

Question

[Mixa]

Использую для парсинга страницы одного сайты Simple HTML Dom. И вот заметил, что он не видит последние обновления на странице, при этом исправно собирает посты, которых на этой странице уже нет, т.к. они перешли на вторую страничку ленты. Как я понимаю, у скрипта есть что-то типа своего кеша, куда он загружает старницы и непоянтно, как заставить его почистить его, чтобы он снова работале корректно.

Answer 1

[Alexander Pushkarev]

Используйте ->clear()

Answer 2

[Stalker_RED]

Насколько я вижу, никакого кеша в нем нет, и страница запрашивается при помощи file_get_contents(). Можете показать код которым вы запрашиваете содержимое страницы?

Вообще Simple_html_dom не обновлялся года три. Я для такого предпочитаю чуть более сложный, но крутой zend_dom_query.

Comments

[Mixa]

Если упрощенно, то вот так

<?php


include('simple_html_dom.php');

$articles = array();


getArticles('https://bla-bla-bla.com1.html');


function getArticles($page) {
    global $articles;
 
    $html = new simple_html_dom();
    $html->load_file($page);
	
	$items = $html->find('ul[class=list_1] li'); 
	
	foreach($items as $post) {

     $articles[] = array(
     $post->children(0)->outertext,
     $post->children(1)->outertext,
     $post->children(2)->innertext,
      );
     }

}




		
    foreach($articles as $item) {

		
		preg_match ("/href=\"(.*)?rmmds=category\"/", $item[0], $itemlink);
		$itemlink = $itemlink[1].$myalifcode;

		
		preg_match ("/data-original=\"(.*?)\"/", $item[0], $itempic);
		echo " pic ". $itempic[1] ."<br/>";	
                $pic = $itempic[1];
		
		
		preg_match ("/rmmds=category\">(.*)<\/a><\/span>/", $item[1], $itemname);
		echo " link ". $itemname[1] ."<br/>";
		$title =  $itemname[1];
		
		$price = $item[2]; ?>
	
    }
?>

Answer 3

[Lander]

А вы уверены, что контент на странице не подгружается AJAXом?

Comments

[Mixa]

Похоже на то. Только что обратный результат получил - контент, которого еще нет на странице, но уверен, он там появится в ближайшее время )) Но вопрос остается - ЧТО ДЕЛАТЬ? ))

[Lander]

Mixa: Ну смотреть по каким запросам получается новый контент и в качестве ссылки на контент указывать эти другие ссылки. В браузере F12 нажмите и поизучайте вкладочку "Network" (Сеть). Возможно вам и simple_html_dom не понадобиться. Вполне возможно что данные в json приходят и можно просто сделать json_decode(file_get_contents(...)) и разбирать массив.