Как обойти ограничения по количеству TCP-подключений у интернет-провайдеров?

Question

[wladm]

Использую программу на ПК: 50+ ботов через прокси одновременно лазят в браузерах, имитируя поведение пользователей.

При достижении примерно 1000 tcp соединений (замеряю утилитой cFosSpeed) новые вкладки перестают загружаться. Интернет жёстко виснет. Хотя мощности железа позволяют. И скорость интернета используется максимум 10 Мбит/c при тарифе в 800+ Мбит/с.

Дело не в железе (мощный сервак) и не в роутере (обычно подключаю кабелем напрямую). Этот же сервак у друга в доме с провайдером Етелеком работает в 200+ потоков и достигает 5000 tcp соединений. Там, по ощущениям, такого лимита вообще нет.

Ограничение наблюдается у провайдеров Дом.ру и Невалинк (и там и там проводил гигабитный интернет с 8-жильным кабелем). Что интересно, у Скайнета в одном доме ограничение было, а в другом не было.

Провайдерам я, разумеется, звонил, и показывал им что новые вкладки не открываются. На что они разводили руками и говорили, что скорость 800+ Мбит/с выдается, значит, всё в порядке. Доказать что-либо про tcp соединения им нереально.

Вопрос к знатокам сетей и тем, кто работает в компаниях-провайдерах. Как и где устанавливаются эти ограничения? Можно ли их как-нибудь обойти? Кто ещё сталкивался с подобными ограничениями в СПб и у каких провайдеров?

Если кто готов разобраться и помочь, покажу, как эти ограничения срабатывают у меня.

Comments

[Ищю в поисковиках]

Воу, в первые о таком слышу. А это точно проблема именно в интернет соединении?

Проверь получше, что это точно дело не в компьютере.

Из того, что может вызывать у провайдера:
- старое оборудование
- DPI
- защиты от ддос (не видел, чтобы их подключали)

В качестве эксперимента, попробуй проксировать соединения через VPS (можно vpn на ней поднять).
Если провайдер как-то ограничивает, то vpn может помочь.

[ValdikSS]

Если провайдер выдаёт вам адрес из приватной подсети и использует CGNAT (диапазон 10.0.0.0/8, 192.168.0.0/16, 172.16.0.0/12, 100.64.0.0/10), то ограничение, с большой вероятностью, настроено на CGNAT.
Решение — заказать услугу «белого»/«реального» IP-адреса.

[Akina]

Думаю, что это - ограничение какого-либо промежуточного оборудования. Самому провайдеру что-то ограничивать вообще никуда не впёрлось (ну если только это не местечковый энтузиаст, окучивающий три соседних дома).

Изучи внимательно договор. Хотя там вряд ли есть какие-либо ограничения такого рода.

Затем подготовь воспроизводимый тест, демонстрирующий проблему и не допускающий двоякого толкования. И в письменном виде вызывай сотрудника провайдера для регистрации факта наличия проблемы и её устранения. Воспроизводи проблему под двусторонний акт - и пусть устраняют. Если откажутся регистрировать, оформлять акт, устранять - фиксируй под акт при двух нейтральных свидетелях, и жалуйся в связьнадзор, ибо налицо нарушение законов и связи и о предоставлении телематических услуг, а также выкатывай досудебную претензию. Впрочем, к этому уже лучше подключить профильного адвоката.

Answer 1

[CityCat4]

Сейчас еще один скажет "похоже я не на тот форум зашел".

То, что провайдер всего лишь ограничивает число соединений, а не банит тебя вообще и не расторгает договор - это тебе еще повезло :) Ты сидишь на общем оборудовании, занимаешь общие магистрали и конкретно мешаешь пользоваться тырнетом прочим, гораздо более благонамеренным юзерам (которые да, в десяток раз тупее тебя, им нужен только вконтактик и мегого - или что там у нас сейчас в Чебурнете 2.0 модно?).

Конечно у провайдеров есть такие ограничения - они были сделаны в эпоху повального увлечения торрентами и сделаны для того, чтобы такие вот умники не ставили на раздачу популярные сериалы и ломаные игрухи.

И уж конечно тут никто тебе не скажет, как их можно было бы обойти :)

Comments

[wladm]

Если я действительно мешаю пользоваться остальным - значит, у провайдеров есть ограничения на количество подключений. Но они упорно доказывают, что их нет. А по скорости я уже сказал, что занимаю не более 10% от своего тарифа. Торренты скачиваю крайне редко. Так что не вижу проблемы нормально объяснить суть проблемы и возможные способы решения.

[CityCat4]

wladm, У провайдеров в саппорте есть методички - чего нельзя говорить клиентам. Вот просто нельзя - и все. Например, нельзя признаваться, что проблема у них, когда нет реальной, подтвержденной тикетами проблемы :) Мазаться пров будет до последнего.
Но они разумеется есть - иначе один такой вот "экспериментатор" укладывал бы целые подсетки.

[CityCat4]

wladm, У провайдеров в саппорте есть методички - чего нельзя говорить клиентам. Вот просто нельзя - и все. Например, нельзя признаваться, что проблема у них, когда нет реальной, подтвержденной тикетами проблемы :) Мазаться пров будет до последнего. Тем более такой говнопровайдер, как Дом.сру :)

Но они разумеется есть - иначе один такой вот "экспериментатор" укладывал бы целые подсетки.

[Ищю в поисковиках]

wladm, CityCat4 тут прав, работал у аналогичного провайдера (мало известного) - говорить, что проблема с оборудованием (порт ошибками сыпет, периодически маршрутизатор ребутается) - нельзя.

Вот если проблема не из-за оборудования (отключили электричество, а батареи просраны) - говорим, что проблема есть, но не у нас.

Часто, после опыта работы, ловил своего провайдера на подобном. Пришлось пару раз повыносить мозги ТП (всегда новенькие и менее опытные попадались) - теперь, когда звоню - говорят правду. (видимо в моем профиле у провайдера обо мне нелестные отзывы))

[wladm]

Ищю в поисковиках, спасибо за информацию. Я догадывался об этом )
Я свою проблему изложил поддержке в гневном письме, и только тогда они сознались, что у них есть ограничения на 2500 tcp и 2500 udp подключений. Плюс спросил их, может ли мне в данной ситуации помочь выделенный ip адрес. Они сказали, что вполне возможно, дали его на тест, и вуаля - проблема решилась, ограничений больше нет.

[CityCat4]

wladm, Блин, чувак, ты ваще. Ты из-за ната этим занимался, что ли? Странно, что тебе попался такой либеральный пров, могли бы нафиг сразу в бан. 2500 nat-записей запросто маршрутизатор поставят раком, особенно если пров не больно толстый.
Конечно, белый IP упрощает задачу - ты по-прежнему забиваешь магистраль, но хоть их маршрутизатор не нагибаешь в третью позицию :)

Answer 2

[rPman]

Эти ограничения провайдеров - упрощенный способ борьбы с торрент клиентами (при большом количестве подключений с одного клиента слабое железо подвешивает), на практике нескольких десятков подключений обычно хватает за глаза и нормальные пользователи с таким не сталкиваются.

Тебе же советую заниматься подобным с VPS-ок установленных в датацентре, либо с помощью VPN перенести выход своих подключений туда где провайдер таких ограничений не делает

Comments

[wladm]

Спасибо. Своего датацентра нет, и аренда оборудования там получается в разы дороже. Про VPN я думал, буду пробовать.

Answer 3

[Griboks]

Никак.

Единственный известный мне способ - упаковать соединения в одно большое, а затем распаковать за пределами сети провайдера. Короче говоря, нужен туннель. Самый простой способ - воспользоваться vpn.

Comments

[Doldoun Dounov]

WireGuard подойдёт под такое дело?

Answer 4

[wladm]

Вопрос решился, благодаря получению выделенного IP у провайдера. Спасибо всем, кто откликнулся.