sh_023

Предварительно что вышло -
После всех возможных тестов проблема не в карте, или sfp модуле, NAS, проблема именно с Микротиком.
По какой-то причине он не пропускает трафик больше, как-будто бы включен Flow Control, но при его включении, скорость падает еще больше. На форме Микротика, много сообщений по этому поводу, и тому что не работает адекватно LAG (LACP) именно в связке с Synology
Если есть, у кого сеть 10гбит на меди или возможность дать коммутатор такой для проверки - прошу связаться со мной.

UPD: Проблема с коммутатором
Был собран сервер на Proxmox и Xpenology те же диски, три гигабитных порта в Bond0
Как итог на чтение - все три гигабита используются, на запись только 1, грешил на диски, пробросил sata SSD итог тот же.
Придет еще одна карточка на 10гбит уже в сервер с DAC кабелем, проведу еще тесты.

Из трех агрегированных каналов, реально, что получается выжать это 1.4гбит (что уже не плохо на самом деле, но грешу на драйвера и прошивку пока что, а может я что криво настроил)
Тестировалось как

-WiFi 160mhz (спидтестом и iperf 3) обычная скорость 700-900мбит (спидтест)
-3 lan порта в режиме агрегации 0 (суммирование всех трех линков)
-Микротик CCS -610 (с 1 сфп+ 10гбит до пк) и 3 лан порта роутера объедены в статический LACP или LAG
-wan - 1Gbit
-Прошивка роутера, последний снепшот на 23/09/22 , с установленными пакетами kmod-bonding и luci-proto-bonding

Метод тестирования
На ноутбуке с Wifi поднят iperf3 сервер
C пк, мы стучим в ноут и параллельно осуществляем тест скорости, результаты выше на скрине

Зачем все это ? Ну например вы делаете резервную копию ноута на НАС и решили качнуть блюрей рип на пк (ну захотелось так, хотя в реальности почти не бывает)

В общем, надеюсь что это кому-нибудь поможет с выбором
css610_8g_2s_in
mikrotik-s-plus-rj10
успел урвать бюджетного за 13 деревянных этот набор
пока на pc линк 2.5gb
осталось докупить адекватный маршрутизатор c 1-2spf и карту в pc на 10гб
нас с агрегировал, но пока еще вопросы (iperf 2.4gb дает, но самба только 1.2)
второй sfp буду использовать для подключения или еще такого же коммутатора (если вдруг портов не хватит)
а так, это идеальное решения для агрегирования каналов и выдачу всего этого по 10гб

П.С. Mikrotik RB5009UG+S+IN нигде в продаже нет, так бы взял его
П.С.С. данный вариант даже дешевле неуправляемого мульти гигабитного zyxel
всем комментатором спасибо за мысли, помогает взглянуть на все с разных сторон)

По итогу разобрался.
Слил все данные с nas и начал экспериментировать.
Правильный ответ оказался от Synology, но и его стоило проверить.
Тесты с помощью SMB Multichannel, простенький управляемый коммутатор TL-SG108E
Сеть пк - два адаптера TP-Link 1gb и встройка на 2.5gb
RAID 0 - 3гбит/с утилизируется полностью, что на чтение, что на запись, собственно с сетью и nas все ок
RAID 10 - 2-2,5гбит/с не полностью забивает канал
RAID 5 - запись 3гбит/с, чтение 1-1.5Гбит/с
SHR-1 - запись и чтение 1.5-1.8Гбит/c не полностью пересобранный (по умолчанию, сразу идет оптимизация и отключить ее нельзя, в отличии от других типов рейда)
Вывод, проблема оказалась в дисках, дело в том, что используются WD Purpur и их ПО работает прекрасно только на запись, но не на чтение.
Буду использовать 5 рейд, потихоньку меняя диски на более емкие и производительные, и только после полной замены можно будет увеличить и скорость и пространство, параллельно модернизируя сеть, что позволит использовать ISCASI