Как спарсить информацию с сайта, который не размещен на сервере?

Question

[soulless-ghost]

У меня есть папка в которой хранятся переписки и фотографии в виде html сайта, но только я могу просматривать этот сайт, потому что он нигде не размещен, я пишу программу которая бы перебирала все эти файлы, считывала код с сайта и если там есть ссылка на фотографию, записывала эту ссылку в файл.

Answer 1

[shurshur]

Если сайт лежит в виде статических файлов на диске, то надо просто читать эти файлы с диска вместо запросов с сервера и свободно обрабатывать теми же самыми регулярками, lxml, bs4 и ещё чем душе угодно. Тут даже проще будет - не надо разгадывать капчи, сохранять куки и всё такое.

Конечно, можно поднять локально web-сервер, но это как вызвать команду геодезистов с теодолитом для измерения своей гостиной, хотя лучше было бы просто купить рулетку.

Answer 2

[Jek]

Наверное поможет библиотека Requests

Comments

[Сергей Горностаев]

Чем, если у автора просто набор html-файлов на диске?

[soulless-ghost]

При попытке отправить запрос на сайт выдает ошибку No connection adapters were found for(Не найдены адаптеры для подключения)

Answer 3

[soremix]

Файл прочитайте

Comments

[soulless-ghost]

Пробовал открывать файл через блокнот, получается код html, но нет ссылки на фото

Answer 4

[Владимир Коротенко]

https://jasonwatmore.com/post/2016/06/22/nodejs-se...
Впрочем в питоне есть и свои сервера
https://codecamp.ru/blog/python-python-http-server/