Ответы пользователя по тегу Парсинг
  • Возможно ли? Парсинг результатов спортивных событий+импорт на свой сайт+ автоматическое построение графиков и диаграмм (по этим результатам)?

    @kryvel
    Системный администратор
    конечно можно. просто нужно выбрать ресурс который проще всего парсить.
    я имею ввиду чтобы страницы отдавались статикой а не подгружались ajaxом.
    для текущего будете собирать данные по мере необходимости. например согласно календарю команды

    ну и по опыту скажу, если Вы это делаете, чтобы найти какую-то зависимость или алгоритм, не тратьте время, его нет))
    Ответ написан
    2 комментария
  • Парсинг данных спортивных событий?

    @kryvel
    Системный администратор
    Есть парсер написанный мною на python , если интересно обращайтесь
    Используется мною в одном проекте, активно развивается

    По опыту скажу, что для того чтобы парсить только футбол, все актуальные сейчас матчи и брать статистику раз в 15 минут, то просто хостинга точно не хватит)) тут нужен минимально VPS
    и пхп здесь тоже не поможет, потому как все стоящие сайты со статой отдают увы динамические страницы
    Ответ написан
    6 комментариев
  • Научиться парсингу - с чего начать?

    @kryvel
    Системный администратор
    Для парсинга я бы посоветовал использовать Python. Он довольно гибкий и простой в изучении. И для этих целей подходит как нельзя лучше. Особенно если нужно парсить динамический контент (AJAX, javascript и постзагруза)
    Альтернативой здесь может быть Java, но это слишком сложно для начинающих
    Можно использовать такую связку:
    Python, Selenium+phantomjs ( загрузка страниц ), beautifulsoup (парсинг html), pymysql (для выгрузки в ДБ).
    Если контент статический то все еще проще - Python + beautifulsoup
    Работает все очень быстро. А главное api очень интуитивное и разобраться в функционале очень легко.
    Ответ написан
    Комментировать