Как спарсить данные со страницы?

Question

[Александр Андропов]

Доброго времени суток друзья. Сразу скажу, что целью НЕ является воровство контента, а простой сбор информации, для статистики и анализа тиражей в бук. конторе.

Пытаюсь спарсить название команд и название чемпионатов, чтобы впоследствии сформировать в нормальной виде.

$useragent = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.122 Safari/537.36";
    $url = "https://www.fonbet.ru/mobile/superexpress-info/?locale=ru#/415";

    $ch = curl_init();
    
    curl_setopt($ch, CURLOPT_URL, $url);
    curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, false);    
    curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
    curl_setopt($ch, CURLOPT_USERAGENT, $useragent);
    curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);
    curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 55);

    $result = curl_exec($ch);
    
    print_r($result);
    
    curl_close($ch);

В итоге получаю постоянно загружающуюся иконку. Подскажите пожалуйста, как правильно спарсить данные с инфосайта - https://www.fonbet.ru/mobile/superexpress-info/?lo...

Спасибо заранее

Comments

[Владимир]

Бук. контора не может нанять специалиста?

Answer 1

[nokimaro]

Используйте Developer Tools браузера (Ctrl+Shift+i)
Там при загрузке странице на вкладке network найдёте все нужные запросы для получения данных
Повторяете их на curl и получите данные в json которые дальше можно распарсить и использовать.

Answer 2

[zkrvndm]

На php ты здесь ничего не спарсишь, так как контент на сайте подгружается динамически. Фактически та страница, которую ты загружаешь через php, еще не содержит контент. Для парсинга такого рода сайтов нужно использовать JavaScript. Как правило, код для парсинга оформляется в виде браузерного плагина. У тебя явно недостаточно навыков, чтобы создать расширение для парсинга, так что тебе прямая дорога на биржи фриланса.

P. S. Как вариант, ты можешь использовать любой-другой ресурс для парсинга информации. Например, я однажды писал парсер для championat.com и там результаты матчей доступы сразу в теле страницы - их вполне можно спарсить на php, без лишних заморочек.

Comments

[Александр Андропов]

Вы видимо сами не особо владейте тем, что пишите. Какие расширения браузера?
В ответе выше, человек нормальным языком подсказал, куда надо смотреть.
С помощью этого, я решил свой вопрос, не создавая никаких "плагинов" и подобного бреда.

Я начинающий и передо мной встают некоторые сложности, насколько я понимаю, такие ресурсы и созданы для того, чтобы направить человека правильно, подсказать (не писать за него код).
Но точно не посылать человека на биржу фрилансеров решать данные задачи. Я это делаю для себя и собственного развития, как программиста, пускай и может чего-то не понимая, но со временем, это пройдет. Так, вы не помогайте людям, а смотря с высока, пытайтесь их уличить в некомпетентности и советуйте не делать это самому.
Не пишите такие советы, они не только НЕ помогут, но и у некоторых людей отобьют всякое желание двигаться в той или инной отрасли и развиваться. Спасибо, что дочитали.