Windows Server как объединить 2 10Гбит/с порта?

Question

[Дмитрий]

Ситуация такая - есть два одинаковых сервера, на которых планируется поднять отказоустойчивый кластер hyper-v. Для миграции и синхронизации виртуалок, сервера между собой соединены через SFP+ сетевые карточки по 2 порта, соответственно 2 линка по 10Гбит/с. Настроено объединение этих линков в режиме LACP, dynamic, также заранее увеличен MTU до 9000, на итоговом адаптере 20 Гбит/с тоже выставлен MTU 9000.
По итогу имею полных 10Гбит/с скорости через копирование файлов и iperf, работает как положено отказоустойчивость. Но вот добиться 20Гбит не получилось... Уже не знаю куда копать, может быть упёрся в какие либо ограничения по железу?

Comments

[Drno]

так их вроде надо в бридж объединять, и назначать 1 IP.. по крайней мере с обычными сетевыми так

[Дмитрий]

Drno, разумеется порты объединены, я же написал это, иначе ничего бы связи не было

[Дмитрий Шумов]

А на сетевом оборудовании сделано?
У меня была похожая ситуация, но мне сказали что это невозможно.

[nApoBo3]

Я не уверен на 100%, но насколько я понимаю, так и должно быть. По идее банасировщик вычисляет hash от некоторых параметров пакета и осуществляет передачу данных по этому hash через один линк. Т.е. увеличение скорости происходит когда у вас несколько клиентов, но для точка-точка скорость остаётся как для одного линка. Буду рад если коллеги меня поправят.

[Дмитрий]

Дмитрий Шумов, у меня сервера подключены друг к другу напрямую, без коммутаторов

[Роман Безруков]

Дмитрий, у вас тиминг настроен средствами ОС или драйверами сетевых карт?
на истину не претендую, но вдруг поможет (тем более, что у вас предполагается Hyper-V):
NIC Teaming Black Belt
Deploy Switch Embedded Teaming (SET) on Hyper-V

[Дмитрий]

Роман Безруков, спасибо, изучу! Отвечая на ваш вопрос, тиминг средствами ОС

[Zerg89]

Дмитрий, Попробуйте запустить тест в несколько потоков
Iperf3 --parallel n
Default 1,

[Дмитрий]

Zerg89, спасибо большое за совет! Если запускать в 32 потока то пиковая скорость достигает 18-19 гбит/с, а значит всё нормально

Answer 1

[vreitech]

В вашем кейсе (копирование файлов и iperf) LACP вам не даст более чем 10 Гбит/с. LACP не предназначен для того, чтобы раскидывать по разным интерфейсам трафик, идущий от одной конкретной машины к другой конкретной машине.
Чтобы дало более 10 Гбит/с - вам нужно соблюсти условие, при котором часть данных пойдёт по первому интерфейсу, а часть - по второму. Как правило данное условие - это I = (A XOR B) % NOA, где A - это MAC-адрес источника, B - MAC-адрес приёмника, NOA - количество адаптеров в агрегации, а I - интерфейс из агрегации.
Другими словами, запускайте 2 iperf'а, обеспечив им такие src MAC и dst MAC, чтобы остаток от деления операции XOR по src MAC и dst MAC на 2 для первого iperf'а был один, а для второго - другой.

Comments

[Дмитрий]

Это соединение сделано исключительно между двумя серверами, значит LACP будет работать по сути только на обеспечение отказоустойчивости, правильно я понял?

[vreitech]

Дмитрий, получается что так, да.

[Дмитрий]

Это зависит от синхронизации, это не каждый раз случается, но если сделать несколько заходов iperf, необязательно одновременных есть шанс увидеть 20Г. Опытным путем удавалось это наблюдать. Чаще LACP для соединений множество к одному

[Дмитрий]

Вообщем запуск iperf в несколько потоков показал что скорости работают, и всё нормально)