А стоит ли пользоваться таким браузером? Сегодня настройки поиска поменяли, завтра логины/пароли сольют кому надо. У DuckDuckGo есть свой браузер, можно и на него перейти.
Everything_is_not_so_bad, А что там анализировать то? При запросе страницы через reqeusts - клауд отдает страничку с кодом 200, на этой странице просит включить js и куки.
Как только запрашиваешь страницу используя aiohttp - js и куки работают, клауд тебя проверяет и говорит - ты бот, иди в сад, и отдает 403 код.
А в сам ответ не заглядывали? Возможно там вас просят включить выполнение скриптов в браузере, для возможности выполнения проверки, а вот парсинг полноценным браузером уже блочат, так как защиту не так просто обойти.
pfg21, не спорю, что сканируют, но большинство ботов не заморачиваются, а просто ломятся на 22 порт. Выводы сделаны из многолетнего наблюдения за своими серверами, количество попыток залогиниться гораздо меньше на нестандартный порт.
Ну и на одном тестовом сервере после смены порта настроил отправку в бан всех, кто постучался на 22 порт, вообще стало спокойно, но пока наблюдаю, будут ли какие побочные эффекты)))
Сайт прекрасно это позволяет, даже кнопка специальная есть.