Как обойти cloudflare при использовании httpclient?

Question

[FaNaT]

Здравствуйте. Есть сайт с подключенным cloudflare. Если будет хороший день, то httpclient без проблем будет посылать запрос на получение html-кода странички. Но порой включается cloudflare и программа начинает сыпать 503 ошибками.

Единственное, что нагуглил, это советы поискать библиотеки в nuget или на github для обхода. Однако они все устаревшие и уже не работают. Либо я плохо искал.

Пытался через selenium, но там после загрузки страницы вылезает капча, которая как будто бесконечная.

Собственно, вопрос: есть способ обойти cloudflare при использовании httpclient? Либо же, в крайнем случае, как настроить selenium так, чтобы он не выкидывал капчу при открытии страницы. Совсем с ним работать не умею.

Comments

[edward_freedom]

вряд ли тебе кто то расскажет это, инфа как его обойти есть в приватных каналах, а владение этой инфой открывает много возможностей

[Василий Банников]

Пытался через selenium, но там после загрузки страницы вылезает капча, которая как будто бесконечная.

Селениум по-умолчанию вроде добавляет в заголовки инфу, что браузер управляется внешними средствами автоматизации, так что надо это всё убрать, чтобы бесконечной капчи не было.

[FaNaT]

Василий Банников, не подскажете как это убрать?

[Василий Банников]

FaNaT, не, не помню. Посмотри, какие там свойства есть при запуске драйвера/браузера.

[Сергей В]

подстановка UserAgent от современого браузера не помогает?

[FaNaT]

Сергей В, неа

Answer 1

[yoori]

Мой способ : понимаем докер из https://github.com/yoori/flare-bypasser , делаем к нему запрос за куками и с этими куками ломимся на целевой сайт - у меня стабильно работает