Парсинг данных спортивных событий?

Question

[gux]

Доброго времени суток. Информации по этой теме в сети, практически нет. Суть моего вопроса такова. Мне нужно получать и обновлять спортивные события, которые идут в реальном времени, а также коэффициенты на эти события. Возможно это сделать с помощью php парсера? Думаю, что нагрузки на сервера должны быть большими.. Откуда можно взять подобную информацию и разумно использовать для получения php парсер?

Comments

[Silm]

А сайты из выдачи по запросу "спортивные события" не подходят?

[nirvimel]

А в чем собственно у вас проблема: вы не знаете спортивные сайты с такой информацией или вы не можете нанять фрилансера и поставить ему задачу по написанию парсера?

Answer 1

[Slava Kryvel]

Есть парсер написанный мною на python , если интересно обращайтесь
Используется мною в одном проекте, активно развивается

По опыту скажу, что для того чтобы парсить только футбол, все актуальные сейчас матчи и брать статистику раз в 15 минут, то просто хостинга точно не хватит)) тут нужен минимально VPS
и пхп здесь тоже не поможет, потому как все стоящие сайты со статой отдают увы динамические страницы

Comments

[Silm]

Что значит динамические? Что мешает найти AJAX запросы и отправлять их с помощью PHP?

[Slava Kryvel]

Silm:
да конечно можно, и websockety тоже можно. только вопрос сколько это времени займет реализовать на пхп ? я уже не говорю о том, сколько времени займет разобраться в js размером в 40к строк, чтобы понять что именно нужно делать)

[Silm]

Slava Kryvel: не знаю про что вы говорите, постоянно так делаю, в JS лезть чтобы найти AJAX запрос надобности нет. В JS смотреть приходилось только когда в ответ на запрос непонятная JSON каша приходила. Ну а какая альтернатива? Выполнять JS? Тогда конечно нагрузка будет в разы выше...

[Slava Kryvel]

Silm: есть такие сайты которые весь контент отдают динамически. особенно это касается спорт статы. так как там постоянно что-то изменяется
так что другого адекватного способа как исполнять js код нет.
поэтому приходится использовать эмуляцию реального браузера. ведь там ребята тоже не глупые сидят и не будут просто так отдавать сырые данные для парсеров)

[Slava Kryvel]

Скажу даже больше. Страница которую Вы получаете по запросу содержит минимальное количество html и вызов всего нескольких функций js которые в последствии и создают/наполняют контент

[Mr_Smoke]

Slava Kryvel, Здравствуйте. Мне нужен парсинг на мой сайт. Вы занимаетесь? Напишите мне в телегу или вотсап [phone] обсудим детали.

Answer 2

[romy4]

нагрузка на сервер при парсинге небольшая

Answer 3

[gux]

А, к примеру, нагрузка при парсинге 5-10 событий нагрузка небольшая, а если событий будет 100+?

Comments

[gux]

Code Turn: для моей цели где-то раз в 3-5 минут

[gux]

Code Turn: спасибо