Как спарсить такую форму?

Question

[BigCrazyCat]

Есть форма с расписанием занятий.
Выбираем факультет и вводим название группы, после чего появляется выпадающий список с вариантами. Далее определяем нужный промежуток времени и получаем таблицу с занятиями.

Вопрос: как можно получить расписание занятий для каждой группы каждого факультета, к примеру, на неделю, в струкутрированном виде?

Скриншоты:

Comments

[Михаил Сисин]

Если бы Вы указали URL ресурса, который вы хотите парсить, то можно было бы помочь. А так, к сожалению, сложно гадать на кофейной гуще

[BigCrazyCat]

Михаил Сисин, каким образом можно с вами связаться?

[Михаил Сисин]

проще всего через онлайн чат тут https://www.diggernaut.ru/, ну или через форму поддержки

[Модератор]

4. После размещения вопроса пользователю запрещается осуществлять:

4.2. Редактирование вопроса с целью его искажения или замены бессвязным текстом. На работу с каждым вопросом тратят время другие пользователи ресурса: модераторы (на его редактирование) и пользователи (на его прочтение и подготовку ответа). Соответственно, при удалении вопроса, потраченное ими время будет обесценено.

Answer 1

[adovnik]

URlе может быть видно как подставляется фак, группа и даты. Скорее всего там ajax, открыть Network и там посмотреть урл и как параметры запроса в нем прописываются. Сгенерить список этих урлов и пройтись по ним распарсивая раписание.

Можно поставить Selenium. Заставить его вводить данные в форму и потом их стягивать.

Comments

[BigCrazyCat]

В URL только один параметр - n - который не понятно за что отвечает и всегда равен 700.
Выглядит так:
.../cgi-bin/timetable.cgi?n=700

[adovnik]

В Network может быть ajax запрос с параметрами. Нужно запустить через консоль разраба и позырить вкладку Network. Найти возвращенную страницу. Вот рандомный скриншот с инета:docs.grafana.org/img/v1/toubleshooting_chrome_dev_...

[BigCrazyCat]

adovnik, и правда.

[adovnik]

BigCrazyCat, вот этот URL можно использовать как шаблон, подставляя в переменные даты, факультет и группу. А потом подгруженную страницу просто спарсивать.

Селекторы элементов, которые Вам нужны, лучше в Мозиле смотреть. Chrome дорисовывает теги, например tbody, если верстальщик его не писал. У меня из-за этого было не мало проблем.

[BigCrazyCat]

adovnik, какими "средствами" лучше всего парсить?

[adovnik]

BigCrazyCat, теми, которые Вы знаете. Можно готовый парсер скачать где-то с интернетов. Можно самому написать на том языке, который лучше знаете. Если не срочно, то на языке, который хотите узнать, вот и все.

[BigCrazyCat]

adovnik, спасибо за ответы.