Задать вопрос

Парсер на Python, как реализовать?

Ребят, имеет такая задача:

1) Человек заходит на специальную страницу, вводит в формочку логин и пароль.
2) Эти данные используются для входа в другой сервис.
3) Открывается внутренняя страница сервиса с данными, где начинают собираться данные.
4) Когда анализ одной страницы заканчивается, идет переход на следующую страницу, и так до стоп-условий итерации.
5) Собранные данные выгружаются в виде таблицы на специальном сайте.

Можете направить меня, как это лучше реализовать?
___________________________________

Ребят, в общем нашел примерный путь, можно использовать beautifulsoup.

Остался вопрос: А как из формы передать парсеру логин и пароль для входа в админку, чтобы он вошел?
  • Вопрос задан
  • 1658 просмотров
Подписаться 14 Оценить 2 комментария
Ответ пользователя Кобальт Грозный К ответам на вопрос (6)
@CobaltTheTerrible
Копипастю код на Python
Можно посмотреть еще на Scrapy.

По своему опыту сразу скажу, что имеет смысл сохранять в какой-нибудь key-value storage все загружаемые страницы. Очень помогает потом в отладке
Ответ написан
Комментировать