Почему низкая скорость между подсетями?

Question

[Павел]

Уже неделю ломаю голову в чём может быть проблема. 2 хоста esxi, на одном крутится шлюз на базе OPNSense, две подсети 192.168.100.0/24 рабочие станции, 192.168.70.0/24 сервера которые крутятся на втором esxi хосте. Всё это подключено к Zyxel GS2210-24. Так вот в пределах одной подсети скорость 100-120 Мбайт/с, но при передачи между сетями, скорость максимум 8 Мбайт/с, подскажите куда копать что смотреть? Может быть из-за разных версий esxi, шлюз крутится на esxi 5.5, ВМ на esxi 6.0? На ESXi #1 ВМ с OPNSense поднято 2 ISP, и 2 локалки - выходят через один vSwitch и PortGroup, правило на OPNSense только одно которое разрешает весь трафик на всех интерфейсах. Все линки локалки гигабитные. ESXi #2 подключается к тому же коммутатору, гигабитным линком.

Comments

[Wexter]

Я правильно понимаю что сеть 100.0/24 находится полность на хосте1, а 70.0/24 на хосте2? Если так то проверьте линки между хостами и коммутатором, возможно один из кабелей плохо обжат и скорость порта выставилась на 100мбит. Либо может на самом коммутаторе жёстко прописана скорость порта 100мбит.

[Павел]

Wexter: на хост 1 работает как роутер, там 4 сетевые - 2 на интрнет, 2 на локалку . Все линки на 1Гбит, да и в пределах одной подсети скорость 100-120 Мбайт/с, скорость падает только при передаче из 100 в 70 сеть, либо из 70 в 100.

[123459]

нет ли тяжелых правил файерволла на маршрутизаторе?

[Павел]

123459: нету, для проверки оставил только одно разрешающее правило которое пропускает весь трафик

Answer 1

[ky0]

Смотреть, какой из линков между хостами 100Мбит.

Comments

[Павел]

Все линки на 1Гбит, да и в пределах одной подсети скорость 100-120 Мбайт/с, скорость падает только при передаче из 100 в 70 сеть, либо из 70 в 100.

[ky0]

Павел: вы говорите, что каждая подсеть у вас на своём физическом сервере - значит в первом случае передача данных происходит локально, отсюда и соответствующие скорости.

Если все линки *точно* гигабитные и нет никаких ограничений на гипервизоре и свитче, возможно дело в настройках сети на виртуалках. Вы как скорость меряете, пробовали ли всякие джамбо-фреймы включать?

[Павел]

ky0: первый сервер выступает как шлюз, там ВМ с OPNSense, джамбо-фрейм включён, т.к СХД подключена по iSCSI.

Answer 2

[silverjoe]

Очень похоже на пиковую скорость устройства 100 Мбит/с
Или сетевуха или свитч/роутер

Comments

[Павел]

Все линки на 1Гбит, да и в пределах одной подсети скорость 100-120 Мбайт/с, скорость падает только при передаче из 100 в 70 сеть, либо из 70 в 100.

[Руслан Федосеев]

проверьте свич еще раз.

[Dark Hole]

Павел: ну откуда мы знаем, что вы там понастроили. Мы же не телепаты, расскажите поподробнее.

[Павел]

Руслан Федосеев: какие параметры проверять?

[Павел]

Dark Hole: Спрашивайте параметры чего нужны, я с радостью предоставлю информацию.

[Dark Hole]

Павел: можете схему сети нарисовать? Хоть приблизительно

[Павел]

Dark Hole: приблизительно нарисовал

[Dark Hole]

Павел: если я все понял, вы из одной виртуальной подсети пытаетесь достучаться до другой?

[Павел]

Dark Hole: да, у всех ВМ в качестве основного шлюза указан адрес OPNSense

[Dark Hole]

Павел: так может, проблема в нем? Пока траффик не выходит за пределы пары ВМ - естественно, скорость большая. А когда выходит - тратится больше ресурсов и падает.

[Павел]

Dark Hole: Тестировал так же на kerio control, pfSense, результат такой же, 5-8 Мбайт/с. Т.е пока трафик не начинает идти через шлюз, всё норм. Нагрузки на физические адаптеры нету, на CPU тоже нагрузки нет. Уже не знаю в чём еще может быть проблема.

[Руслан Федосеев]

у вас между сетями 100 мбит.
Это может быть на виртуальных интерфейсах OPNSense, на портах свича, в которые включены ESX. Проверьте весь путь прохождения трафика.

Answer 3

[bely87]

Подключите свой ноут к свичу с настройками сначала к под сети 192.168.100.0/24 потом к 192.168.70.0/24 измерьте с помощью Iperf вдруг одна из сетевух у тебя работает не верно