Достаточно простая конфигурация:
сервер HP DL380 9 поколения, два процессора 2.4ГГц, 384 Гб памяти. Двухпортовый FC адаптер 8Гб/с.
хранилка HP MSA 2042, 4хSDD 400Гб и остальное HDD 1.2Тб, SAS 12Гб/с
Оптика подключена напрямую, без коммутаторов. Другой нагрузки нет.
Создал тома на хранилке, подключил на сервере (win2012r2).
Копирую файлы FARом. Файлы до 25Гб размером копируются с подключенного диска на него же со скоростью около 900 Мбайт/сек. Но с увеличением объема файла (где-то от 100 Гбайт) скорость в процессе копирования падает ниже 90 Мбайт/сек. Минимум который видел 75 Мбайт/сек. У меня 96 Мбайт/сек выдает старая Iomega StorCenter px12-400r набитая обычными SATA дисками через 1Гб/с iSCSI, причем стабильно.
Пока писал вопрос, решил проверить еще одну пару сервер-схд: сервер такой же как описано выше, а СХД Infortrend DS3024. Диски там тоже HDD 1.2Тб, SAS 12Гб/с, линк сервер-схд FC 8Гб/с Так вот при копировании файла 200Гб, скорость изменилась где-то с 700 Мбайт/сек до 98 Мбайт/сек. под конец копирования.
Нужно больше данных: тип массива, тип и количество дисков, размер страйпа, размер и тип кеша, тип фс, размер блока фс, размер блока I/O, размер очереди, характер нагрузки. Пока, в рамках гадания на кофейной гуще: кончается кеш-память, ростёт очередь и линейная скорость упирается в производительность одного диска. Так же вы читаете и пишите с одного и того-же хранилища, что может ещё поделить производительность пополам(в лучшем случае).
15432, Дмитрий, а какую скорость можно ожидать от HDD SAS 10K на чтение-запись от одного диска в идеале ?
Я, если честно, совершенно безосновательно ожидал что-то в районе 500Мбайт/сек. на чтение/запись.
Собрано все в RAID10, на HP MSA2042 настроек особо и нет, выбираешь тип raid, собираешь диски в группы, нарезаешь на тома. Файловая сиcтема NTFS. Другой нагрузки нет ( вернее в связи с выходными все остальное около 0 )
Если читать с одного тома и писать на другой скорость получается выше более чем в два раза. Что подтверждает слова Дмитрий "Так же вы читаете и пишите с одного и того-же хранилища, что может ещё поделить производительность пополам(в лучшем случае). "
Вячеслав, линейная скорость у sas hdd 10k до 200MB/s, у sas ssd до 1000MB/s. "Нагрузка около 0" != 0. Значит что то ещё всё-таки да пишется и читается, значит не чистая линейная нагрузка, а это тоже вносит коррективы в ваши тесты. Так же интересно как участвуют ssd диски в пуле - как быстрый тир, как кеш или как отдельный пул только на ssd. Пока ваши максимальные 900MB/s выглядят вполне реально, если считать 8x sas hdd в raid10 при линейной записи.
"линейная скорость у sas hdd 10k до 200MB/s" это очень похоже на правду. При копировании с тома на том в другом пуле средняя скорость в районе 250MB/s, и это при наличии другой нагрузки ( измерял в рабочее время ). Дмитрий, спасибо.