Как лучше организовать подключение 8 СХД к группе серверов vmware?

Question

[Hydrafirelol]

Как лучше организовать подключение 8 СХД (двухконтроллерные) к 24 (2x10gbit per server для iSCSI трафика) серверам VMware?
Подключение по iSCSI.
Нужно ли для каждой СХД под каждый контроллер выделить свой VLAN /27?
Вариант 1) 8 СХД = 16 Контроллеров = 16 VLANs /27 маской.
Или можно обойтись меньшим количеством VLAN?
Вариант 2) 8 СХД = 16 Контроллеров = 8 Контроллеров A и 8 Контроллеров B = 4 VLANs /26 (4 контроллера A в VLAN1, 4 контроллера B в VLAN2 = 4 СХД и 4 контроллера A в VLAN3, 4 контроллера B в VLAN4 = еще 4 СХД).

Какие существуют риски при 4 VLANs для 8 СХД вместо 16 VLANs? Бродкаст/Проблема с multipath и т.д.?

Comments

[VoidVolker]

Hydrafirelol лучше для чего именно? Какую вообще проблему хотите решить разделением сетей? Просто чтобы было или есть какие-то цели разделения трафика?

[Hydrafirelol]

VoidVolker, вычитал на просторах интернета, на spiceworks/reddit и другие форумы и там наткнулся на множество обсуждений, что необходимо изолировать iscsi трафик для каждого контроллера СХД, в том числе и были посты, что если несколько СХД, то изолировать их также отдельными VLAN.
Я изначально хотел сделать как написал Ava256 просто взять 2 VLAN (один для всех А контроллеров всех СХД + vmkernel порты на esxi хостах, а второй для всех B контроллеров всех СХД и vmkernel портов esxi хостов), но потом начал сомневаться после форумов и еще в deepseek загнал вопросы и он меня кошмарить начал на предмет: что будут сбои, могут поломаться vmfs и Broadcast storm-ы положут сетки...и мол лучше для каждой СХД свои VLAN для A и B контроллеров...
вот такие дела...
сомнения...

[SunTechnik]

Hydrafirelol,
А можно хоть одну ссылку, где говорится что надо изолировать трафик каждого iscsi контроллера?

Такая рекомендация есть для FC (настройка зонирования) , но это отдельный протокол, со своими тонкостями.

Answer 1

[Ava256]

Чтобы работал мультипасинг вам нужны только отдельные подсети для контрллеров А и B на СХД.
Можно обойтись и одним vlan для изоляции этого трафика.Можно сделать по vlan’у на каждую подсеть, если логически так удобнее.
В одну подсеть подключаете все контроллеры -А, в другую -B.На esxi настраиваете два vmkernel интерфейса, по одному в каждую подсеть и в принципе все.
Ну и под этот трафик лучше иметь отдельные сетевухи на сервере, чтобы не бороться с другим сетевым трафиком.Но это все зависит от задачи и сетевой активности.

Comments

[Hydrafirelol]

Ava256 Спасибо за ответ, я вот тоже к этому варианту склонялся, но вот начитался, как описал в комментарии для VoidVolker и начал сомневаться...

[Ava256]

Hydrafirelol, Там есть разные варианты подключения.Можно вообще сделать в одном vlan и одной подсети, но надо будет делать port-binding в настройках iscsi hba.
А вообще вам стоит еще посмотреть в документации к СХД.Там обычно тоже пишут как лучше настраивать.
Есть еще вот такая документация от Vmware.
https://www.vmware.com/docs/best-practices-for-run...

[Hydrafirelol]

Ava256, в документации вообще ничего про какое либо разделение (( https://docs.raidix.ru/raidix/doc/raidix-5-2-4-oig...

Собственно все переживания связаны с тем, что меня интересует вопрос не будет ли проблем, если несколько СХД будут жить в двух VLAN (А и B контроллеры и vmkernel2/3) зарезервированных под iSCSi. В плане проблем с пропускной способностью понятно, т.к. на данный момент на серверах только по 1 hba с 2 портами 10гбит/с, а у схд по 2 порта на контроллер. Не будут ли СХД мешать друг другу в плане, что трафик от одной СХД контроллера А каким-то образом помешает трафику от другой СХД контроллера А (которые в одном VLAN) и допустим данные или сами vmfs будут повреждены или будут другие проблемы? Супер большие обьемы пока не планируется гонять там...

На текущий момент подключено так:
Допустим:
VLAN2 (iSCSI A) 10.10.2.0/27
VLAN3 (iSCSI B) 10.10.3.0/27
СХД Контроллер А Порт 1 - VLAN2 (10.10.2.2)
СХД Контроллер B Порт 1 - VLAN2 (10.10.3.2)
На esxi hosts
vSwitch2 с двумя аплинками 10гбит/с
Дальше порт группы:
iSCSI A (VLAN2) в ней vmkernel2 10.10.2.3 и на уровне порт группы в nic teaming предопределены настройки/отключено наследование от свича для в failover order и активен один порт из двух - vmnic 4, а vmnic 5 - не используется.
И
iSCSI B (VLAN3) в ней vmkernel3 10.10.3.3 и на уровне порт группы в nic teaming предопределены настройки/отключено наследование от свича для в failover order и активен один порт из двух - vmnic 5, а vmnic 4 - не используется.

Дальше в software iscsi adapter
В network port bindings добавлены vmk2 и vmk3 (порты группы iscsi a и b)

СХД доступна, работает - часть тестовых виртуалок мигрировал на новый datastore.

В эти существие VLAN планирую подключить еще 1 СХД raidix и со старых FC 4gbit переключить 2 шт. MSA2050/2052.