Задать вопрос

Павел Собыкин

Учусь, познаю, пытаюсь что то делать
Комментарии

  • Как решить проблему с парсингом динамического контента?

    @RightScripts Автор вопроса
    Гуглил, гуглю, и наверно еще буду гуглить. После того как неделя использования гугла, и перебора всех способов описанных в найденных статьях не помогло, решил спросить мнения, которые мне по большому счету помогли. Получилось реализовать задачу с помощью php-webdriver, только реализация очень сложная и пытаюсь найти решение при помощи посыла ajax запроса как реккомендовал Dmitry Tallmange. Вот опять на этом этапе застрял, и опять гуглю и изучаю. Все темы на форумах, которые находил, пока не натолкнули к решению проблемы. Возможно в ближайшем времени придется задавать опять вопрос, если не получится найти решение самостоятельно.

    А на счет нанять профессионала, так он нанял, результата тоже 0 )
    Написано

  • Как решить проблему с парсингом динамического контента?

    @RightScripts Автор вопроса
    Где можно почитать информацию о том, как перехватывать эти айди и отправлять такие же запросы?
    Или, я не правильно задал вопрос, и нужно делать что то другое?
    Написано

  • Как решить проблему с парсингом динамического контента?

    @RightScripts Автор вопроса
    Вот что я нашел, возможно не там искал.

    Request URL:www.statarea.com/actions/controller
    Request Method:POST
    Status Code:200 OK
    Remote Address:5.9.89.124:80
    Referrer Policy:no-referrer-when-downgrade
    Response Headers
    view source
    Cache-Control:no-cache
    Connection:close
    Content-Encoding:gzip
    Content-Type:text/html; charset=UTF-8
    Date:Fri, 29 Dec 2017 14:42:55 GMT
    Expires:Fri, 29 Dec 2017 14:42:54 GMT
    Pragma:no-cache
    Server:nginx
    Transfer-Encoding:chunked
    Vary:Accept-Encoding
    Request Headers
    view source
    Accept:*/*
    Accept-Encoding:gzip, deflate
    Accept-Language:ru-RU,ru;q=0.9,en-US;q=0.8,en;q=0.7
    Connection:keep-alive
    Content-Length:87
    Content-Type:application/x-www-form-urlencoded; charset=UTF-8
    Cookie:statarealanguage=en; statareasvgsupport=yes; statareadevicescreensize=1920x1080; statareacookieagreement=1; __tx=xifkiibx721512677096; __utmz=233532508.1514204501.9.2.utmcsr=finance-expert.xyz|utmccn=(referral)|utmcmd=referral|utmcct=/page2.php; PHPSESSID=s4r1cs189tmu9sv07k7k5e6d20; __utmc=233532508; __utma=233532508.1456532480.1512677096.1514418905.1514455216.15
    Host:www.statarea.com
    Origin:www.statarea.com
    Referer:www.statarea.com/predictions
    User-Agent:Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.84 Safari/537.36
    X-Requested-With:XMLHttpRequest
    Form Data
    view source
    view URL encoded
    object:{"action":"getMatchBetInformation","matchid":"827160"}
    Написано

  • Как решить проблему с парсингом динамического контента?

    @RightScripts Автор вопроса
    Спасибо, буду изучать это направление. Я много слышал о том, что тема парсинга больше всего раскрыта на питоне. Хотелось все таки найти php серверное решение. Еще раз спасибо за все советы, пошел углубляться)
    Написано

  • Как решить проблему с парсингом динамического контента?

    @RightScripts Автор вопроса
    Там не ajax, отследил что запрос идет сюда www.statarea.com/actions/controller
    но никакого айди не добавляется. И пишет что используется jquery, нашел сам скрипт у них) То есть, контент 100% генерируется javaScript'ом, тянут либо со своей базы, либо еще с какого сайта, не важно. Суть, получить уже готовый HTML после нажатия по элементу.
    Написано