Как спарсить страницы с помощью PHP (адрес страниц один и тот же, но содержимое разное в зависимости от введённого логина)?

Question

Николай Шепелев @venomkol

Как спарсить страницы с помощью PHP (адрес страниц один и тот же, но содержимое разное в зависимости от введённого логина)?

Кратко суть:
Есть список номеров зачеток студентов, по которым осуществляется вход на сайт с их результатами учёбы. Эти результаты надо спарсить, объединить и предоставить в удобном виде, на одной странице.

Теперь всё по частям:

Есть список номеров зачёток для входа на сайт.
Есть страница, где осуществляется вход на сайт только по номеру зачётки (домен/sign_in/). Дальше страница с которой нам надо парсить данные (домен/archive/), доступна, естественно, только после входа, для каждого номера свои данные;
Парсим данные, объединяем, выводим на нашем сайте в удобном виде.

Теперь вопросы:

Как реализовать вход на сайт?
Как дальше "перейти" на страницу с данными?
И собственно, главный, как реализовать парсинг, какие инструменты/библиотеки использовать?

Всё с помощью php(!)

Структуры страницы, думаю описывать глупо, лучше, если Вы посмотрите всё сами.
Страница входа - goo.gl/2RFrN9
Страница с данными - goo.gl/jTQzhd (доступна после входа)
Номер - 13048050

P. S. В этом деле я новичок, c PHP знаком поверхностно (можно сказать, что совсем не знаю). Главный вопрос - как сделать вход, и парсинг?

Вопрос задан более трёх лет назад
1479 просмотров

Комментировать

Подписаться 3 Оценить Комментировать

Answer 1 · 2015-07-15 18:46:04

Авторизоваться можно через curl, например.

curl_setopt($curl, CURLOPT_POST, true);
curl_setopt($curl, CURLOPT_POSTFIELDS, "a=4&b=7");

А парсить при помощи Zend\Dom. Его можно как отдельный модуль взять, там всего три файлика.

$doc = new Zend\Dom\Query($html, 'utf-8');
        $links = $doc->execute('ul.menu a');
        foreach ($links as $link) {
            $url = $link->getAttribute('href');
        ...

Как спарсить страницы с помощью PHP (адрес страниц один и тот же, но содержимое разное в зависимости от введённого логина)?

Войдите на сайт