Существует ли станица сайта?(проверка) на пайтон. Как сделать?

Question

[1HAWK1]

Существует ли станица сайта?(проверка) на пайтон. Как сделать?

Answer 1

[soremix]

Универсального ответа нет. Вам нужно определить свой фингерпринт несуществующей страницы на нужном сайте.

Какие-то сайты выполнят редирект на /404 или условный /notfound, а может на /. Кто-то может упасть в 5хх ошибки, а кто-то выдаст 404 page not found, при этом вернув статус код 200. Если нет нужного уровня доступа, может выпасть и 401, страница то сущесвует, только прав для доступа к ней нет, это считается существованием для вас?

В общем, определять существования можно хоть как, по размеру ответа, по статус коду, по редиректам, по тексту на страница, по кол-ву слов на странице, и тд и тд. Все зависит от ваших задач и сайта. Обычный get на нужную страницу и там уже выбираем один из вариантов выше

Comments

[1HAWK1]

Мне выдаёт:

Not Found
The requested URL was not found on this server.

BlackHarrier 10 Server at virusshare.com Port 443

Что делать в таком случае?

[1HAWK1]

Я пишу свой антивирус и хочу сделать обновление сигнатур с этого сайта по кнопке

[soremix]

1HAWK1, это что? ну допустим, это тело ответа

import requests
r = requests.get(url)
if 'The requested URL was not found on this server' not in r.text:
    #...