Как отловить 404 ошибку при парсинге?

Question

[Qubert]

Здравствуйте!

Есть простой и тупой код на пхп с simple_html_dom.php. Парсю как раз им. Есть много страниц товаров, но, к примеру, есть 100 и 102, но нет 101. Как мне поймать 404 ошибку?

$e = 'HTTP_Exception_404';
try {
$data = file_get_html('ссылка');
} catch (Exception $e) {
echo $e;
}

Answer 1

[akashtrih]

Почему бы не распарсить страницу с 404 ошибкой тем же simple_html_dom?
То есть

try {
    $data = file_get_html('ссылка');
    // например, на странице с ошибкой текст ошибки '<div class="error">... Ошибка 404, товар не найден ...</div>'
    if (false !== strpos($data->find('div.error', 0)->plaintext, '404')) {
          throw new Exception('HTTP_Exception_404');
    }
    else {
          // дальнейшая обработка данных
    }
} catch (Exception $e) {
    echo $e->getMessage();
}

Comments

[Qubert]

это решением и оказалось... но проще написать просто if($data) {} else {} спасибо)

[Chernichko]

Qubert, а если ошибка страницу 504, то $data также возвращается false!?
не могу найти или проверить как то это.....

Answer 2

[Вадим Яковлев]

$handle = curl_init($url);
curl_setopt($handle,  CURLOPT_RETURNTRANSFER, TRUE);
$response = curl_exec($handle);
$httpCode = curl_getinfo($handle, CURLINFO_HTTP_CODE);
curl_close($handle);
if($httpCode == 200) {
  $data=str_get_html($response);
}

Comments

[Qubert]

только через курл?(

[Вадим Яковлев]

@Qubert можете использовать get_headers($url), но курл как-то приличнее

[AxisPod]

А чем курл страшен? Сделайте простую фукнцию, которая в случае не 200 ответа кинет вам эксепшен с кодом ошибки, который можно спокойно проверить и используйте данную функцию.

[Qubert]

@AxisPod в данном случае мне курл не подошел, т.к. все товары имеют свой id, при это они разделены на категории! не совсем понял, почему, когда я через simple_html_dom парсил у меня работала (то есть если айди какого-либо не существовало в определенной категории, то он сам прееходил в ту категорию), а с курлом там не получалось, если я вбивал айди товара, не существуюшего в данной категории он не парсил вообще (а я не мог по-другому сделать)