Странное поведение у 3proxy, как исправить?

Question

[infirmitive]

Есть роутер KN-1810, поставил entware и поднял 3proxy через opkg. Запускаю http прокси с указанием входного и выходного интерфейса (4G модем на M2 адаптере). Подключаюсь, вроде бы все хорошо работает. Мой софт скраппит сайт и все бы ничего, но при попытке загрузки JS скрипта с сайта hCaptcha (так не только с этим сайтом, еще некоторые так себя ведут) получаю ошибку Err_tunnel_connection_failed.
При чем если я открою этот сайт не через прокси, а в роутере поменяю приоритет подключений и сделаю приоритетным 4G модем, то тогда ошибки Err_tunnel_connection_failed нет, JS скрипт успешно загружается.

Лог 3Proxy:

241121115851.929 3128 00000 admin 192.168.1.60:58250 151.101.67.52:443 517 0 0 CONNECT store.fastly.steamstatic.com:443 HTTP/1.1
241121115851.929 3128 00000 admin 192.168.1.60:50859 151.101.131.52:443 517 0 0 CONNECT store.fastly.steamstatic.com:443 HTTP/1.1
241121115851.929 3128 00000 admin 192.168.1.60:49974 151.101.131.52:443 517 0 0 CONNECT store.fastly.steamstatic.com:443 HTTP/1.1
241121115851.930 3128 00000 admin 192.168.1.60:57480 151.101.67.52:443 581 3875 0 CONNECT store.fastly.steamstatic.com:443 HTTP/1.1
241121115852.845 3128 00000 admin 192.168.1.60:58080 151.101.67.52:443 0 0 0 CONNECT store.fastly.steamstatic.com:443 HTTP/1.1
241121115906.707 3128 00000 admin 192.168.1.60:63025 74.125.205.103:443 581 2800 0 CONNECT www.google.com:443 HTTP/1.1
241121115906.707 3128 00000 admin 192.168.1.60:57146 209.85.233.147:443 581 2802 0 CONNECT www.google.com:443 HTTP/1.1
241121115908.333 3128 00013 admin 192.168.1.60:60611 104.19.230.21:443 0 0 0 CONNECT js.hcaptcha.com:443 HTTP/1.1 - вот на этот запрос получаю Err_tunnel_connection_failed
241121115928.084 3128 00095 admin 192.168.1.60:49973 151.101.131.52:443 6770 2108939 0 CONNECT store.fastly.steamstatic.com:443 HTTP/1.1
241121115928.084 3128 00095 admin 192.168.1.60:65103 64.233.164.84:443 2434 6666 0 CONNECT accounts.google.com:443 HTTP/1.1
241121115928.084 3128 00095 admin 192.168.1.60:58949 2.22.37.102:443 1870 73786 0 CONNECT store.steampowered.com:443 HTTP/1.1
241121115928.084 3128 00095 admin 192.168.1.60:61827 64.233.163.95:443 1300 4294 0 CONNECT content-autofill.googleapis.com:443 HTTP/1.1

dns у 3proxy прописаны 8.8.8.8, 8.8.4.4

Answer 1

[Владимир Дубровин]

Когда вы подключаетесь через прокси у вас tcp fingerprint роутера, можете посмотреть фингерпринты например здесь
https://browserleaks.com/ip и такие фингерпринты могут блокироваться сервером, т.к. обычно с ними ходят боты/DDoS но практически никогда не ходят пользователи. hcaptcha проверять фингерпринты несомненно умеет.

Comments

[infirmitive]

А как на уровне iptables это можно исправить?

iptables -t mangle -A POSTROUTING -o qmi_br0 -p tcp --tcp-flags SYN,RST SYN -j TCPMSS --set-mss 1400

Вот так сделал и не помогло. MTU 1500, ttl пробовал 64 - тоже не помогло, вообще перестал его задавать.

[infirmitive]

Похоже, дело все таки не в этом. TCP Fingerprint у меня андроидовский показывается. Пробовал с другим мобильным прокси для теста и там капча загружается при идентичном fingerprint(оба android), но через мой модем не хочет.

[Владимир Дубровин]

infirmitive, MSS не зависит от ОС, он зависит от типа подключения, ttl обычно и так 64 во всех Linux.

как фингерпринты обходить это отдельный вопрос

[infirmitive]

Владимир Дубровин, т.е. если я, например, запущу 3proxy на домашнем сервере, а не роутере и точно так же запущу прокси сервер через интерфейс модема, то, в теории, я обойду это ограничение? на счет tcp fingerprint не совсем понял, у меня во всех случаях подключения через прокси на роутере выдает, что я с андроид смартфона

[infirmitive]

вариант с тем, что определяется автоматизация браузера тоже отсеивается, т.к. взял для теста в сервисе мобильных прокси такого же оператора сотового и там капча грузится. tcp fingerprint тоже андроидовский