Здравствуйте.
Есть сайт. В учебных целях пробую научиться парсингу. Ссылка -
goo.gl/MOCHts
Получается достать первые 11 страниц результатов.
POST запрос для перехода на определённую страницу:
'__EVENTTARGET' : 'ctl00$ctl00$MainContent$ContentPlaceHolderMiddle$ctl00$SearchResult2$ctl01$ctl(..............)' в скобках цифра от 01 до 11.
При отправке же POST запроса с цифрой 12 выдаётся информация с 1-ой страницы.
Т.е. структура навигационная для перехода по страницам такая:
1 - ctl00$ctl00$MainContent$ContentPlaceHolderMiddle$ctl00$SearchResult2$ctl01$ctl01
2 - ctl00$ctl00$MainContent$ContentPlaceHolderMiddle$ctl00$SearchResult2$ctl01$ctl02
3 - ctl00$ctl00$MainContent$ContentPlaceHolderMiddle$ctl00$SearchResult2$ctl01$ctl03
...
10 - ctl00$ctl00$MainContent$ContentPlaceHolderMiddle$ctl00$SearchResult2$ctl01$ctl10
>> - ctl00$ctl00$MainContent$ContentPlaceHolderMiddle$ctl00$SearchResult2$ctl01$ctl11
При клике на ">>" переходим на страницу с уже новыми номерами, причём запросы остаются такими же!
<< - ctl00$ctl00$MainContent$ContentPlaceHolderMiddle$ctl00$SearchResult2$ctl01$ctl01
11 - ctl00$ctl00$MainContent$ContentPlaceHolderMiddle$ctl00$SearchResult2$ctl01$ctl02
...
20 - ctl00$ctl00$MainContent$ContentPlaceHolderMiddle$ctl00$SearchResult2$ctl01$ctl11
21 - ctl00$ctl00$MainContent$ContentPlaceHolderMiddle$ctl00$SearchResult2$ctl01$ctl12
Никак не могу понять, как сайт определяет, что он уже на 20 страницах или 50, либо ещё каких других.
Просматривал cookies, запросы POST, даже header. Всё вроде одинаково, что с первыми 10-ю результатами, что с последующими десятками.