Пробую парсить с сайт с помощью класса HttpWebRequest, в ответе мне приходит вот такая разметка
<html>
<head>
<script>function set_cookie(){var now = new Date();var time = now.getTime();time += 19360000 * 1000;now.setTime(time);document.cookie='beget=begetok'+'; expires='+now.toGMTString()+'; path=/';}set_cookie();location.reload();;
</script>
</head>
<body>
</body>
</html>
Сайт требует куки, как я понял. Вопрос, какие именно куки ему нужны? Можно конечно посмотреть в хром дев тулз какие заголовки отправляются при запросе, но куки думаю могут меняться, а мне нужно что бы парсинг с нужного сайта был постоянным.
Откуда брать нужные для запроса куки?
