Возможно ли реализовать запрет скачивания сайта через Flask?

Question

[artempawww]

Как можно реализовать запрет скачивания сайта через фласк? То есть чтобы ни через вгет, ни через сторонние сервисы нельзя было получить папку с сайтом?

Comments

[Алан Гибизов]

По-идее, сайта в папках и быть не должно. Должен формироваться html из шаблонов на ходу под конкретный запрос.
Т.е. у тебя есть папка со статикой, папка с шаблонами, база данных и собственно бэкенд. Из всего этого только статику могут скачать - без этого никак.
Остальное недоступно, если правильно настроен сервер. Ну то-есть они могут получать динамически сформированные html/css/js/gif и т.п., но это в некотором роде не совсем сайт.
Это как если кто-то сфотографирует Джоконду - у него будет фото картины, но таки не картина.

[artempawww]

Алан Гибизов, бекенд они по сути не получат?

[Алан Гибизов]

artempawww, если он не будет открыт сам по себе - конечно нет. Там же с наружной точки зрения только запросы к 80 порту типа get, post и ещё пару других типов. По этим запросам бэкенд понимает, что именно надо сформировать (на основании того, что в бэкенд вписал программист на основании ТЗ). И это сформированное отдаётся серверу (какому-нибудь nginx, apach и т.п.), а сервер отдаёт в ответ на запрос наружу.
И если в ТЗ не было написано «отдать всё даром», и программер не накосячил, то отдаться прям всё не должно никак. Ну разве что дыра в защите будет.

Другое дело, что зачастую скраперам нужны именно данные с сайта, бэкенд они и сами свой накропают. Но уж тут, как и написали в ответах, никуда не деться.

Answer 1

[Vindicar]

Отключить сайт.

Ты можешь прибегать к разным хитростям, конечно.
- проверка User-Agent и Referer.
- проверка на исполнение скриптов
- browser fingerprinting, т.е. попытка выяснить, что за браузер у клиента по его особенностям реализации

Но в конечном итоге это будет гонка "кто лучше знает поведение реального браузера". Гонка скорее всего закончится, когда потенциальный скрапер будет дёргать твой сайт селениумом.

Можешь попробовать зайти с другой стороны, конечно, и требовать двухфакторную авторизацию для входа. Но и это автоматизируется, а вот пользователей отпугнёшь.

Answer 2

[deepblack]

все что может загрузить браузер - можно сказать уже скачано.
Папку с сайтом? Что имеется ввиду: исходники на Python? Так при правильной настройке вебсервера они и так недоступны.
html - он же для того и предназначен чтобы его качали.

Если нужно, можно ограничить доступ некоторым useragent, таких образом отвалятся самые ленивые.