Как найти сайты которые не проиндексированы поисковиком?
Такой вопрос, как найти сайты, которые не индексируется поисковиками? Нужно сканировать айпишки и порты, пытаться понять, что это какой-то веб ап, либо хтмл? Или просто подставлять все возможные адреса в урл и пытаться к ним законектиться?
Для того, что бы искать сайты "глубокого интернета" можно воспользоваться каким нибудь сервисом, предназначенным для этого.
Подробнее на вопрос ответит вики https://ru.wikipedia.org/wiki/Глубокая_паутина