В чем причина разрыва доступов к сетевым папка (shares) на Windows Server 2012 r2?

Question

[x2sp]

Добрый день.

Коллеги, хаотично в разные интервалы рабочего времени пропадает доступ по smb к сетевым папкам. Сервер доступен по rdp и ICMP.

Инфраструктура:

Гипервизор на базе Windows Server 2012 r2 с последними обновлениями.

E5-2650v4 -2шт, 128 GB Memory, Raid 5 7200.

Виртуальная машина - Windows Server 2012 r2 с последними обновлениями.

Cpu 2 core 10k memory

Коллеги, с проблемой боремся уже более 3 месяцев, далее хронология:

1) Первоначально ВМ базировалась на 2008 r2 и мы начали получать аналогичные проблемы. Так как постепенно переводим остальные сервисы на 2012 r2 и оперативно найти причину проблемы мы не смогли, решили перевести машину на 2012 r2.

Новая VM устанавливалась с образа MSDN
Обновлена полностью
Диск от старой VM с данными шар был отключен, сконвертирован в VHDX, подключен и через реестр были перекинуты сетевые шары.
Машина функционировала несколько дней нормально, но проблема повторилась.

2) Объем диска с данными был равен 1300 гб. Решили разбить его на два куска и посмотреть что будет с сервисом.

Был подключен диск и на него переехало 700 гб данных.
Перенастроены в ручную перенесенные сетевые папки.
Проблемы остались, но было зафиксировано следующее поведение:

Пропадает доступ только к части сетевых папок. При открытии проводника, пропадает 1 из дисков.

3) Решили повторно перенести данные на новые диски. Но уже переделать NTFS права на папках и избавится от диска, который ранее был сконвертирован.

Проблема осталась, но нашли на течнете аналогичную статью от 2012 года с более чем 300-ма записями:

https://social.technet.microsoft.com/Forums/Window...

4)

1. В статье был предложен метод перегрузки службы "Server" - сервис переходит в статус "остановка" и зависает.
   
2. Была отключена система резервного копирования UDP Arcserver, но проблема повторилась и после выключения бекапа.
   
3. Передвинули машину на другой сервер с другой аппаратной частью (C Supermicro - на HP 380g7)
   Добавлен ключ REG ADD HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services\lanmanserver\parameters /v DisableLeasing /t REG_DWORD /d 1 /f
   
4. Добавлен ключ reg add HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Servic es\lanmanserver\parameters /v MaxThreadsPerQueue /t REG_DWORD /d 1024 /f
   

5) Так как все предложенное с форума нам не помогло, начали анализировать сессии которые были открыты в момент зависания.

Было предложено, что мы имеем 3 проблемных сервиса на файловом ресурсе:

1. Linker Server с 2014 SQL
   
2. Базы MSACCESS 2003
   
3. И некоторая папка с огромными путями
   

Решили первым делом передвинуть базы MSACCESS с одного диска на другой и получили ситуацию:

Ранее у нас пропадал диск E, после переноса начал пропадать диск F.

6) Перенесли базы access на другой сервер и после 4 дней стабильной работы снова получили ошибки.
Но теперь при появлении проблемы были зафиксированы битые файлы:

xlsx документ с которым работал сотрудник
pdf документ, который сохранялся на сетевую шару.

Находимся в стадии шока и не понимаем за что можно зацепится.

Comments

[x2sp]

Забыл добавить, что единственным решением в данной ситуации это жесткий ребут при удалении процесса машины на гипервизоре. Если отправить vm на перегрузку в операционной системе, она не может завершится.

[Александр]

Судя по треду в 300 записей аж на течнете, причем без результата - ставить Линукс постабильнее, CentOS, а на него самбу. Это конкретно под файловую шару.
Если так всё будет работать нормально, то сравнить драйверы, если и они идентичны окажутся - пенять на Винду.

[inok_dexter]

Была точь-в-точь такая же проблема, советы с форума течнета не помогли.
Нашли два варианта решения:
1. Отключить протокол SMB2, SMB3 на сервере
2. Поставить Windows Server 2019

[ComodoHacker]

В журналы никто не догадался заглянуть?

[x2sp]

ComodoHacker, вы ознакомились со статьей на течнете? Если нет, тогда у большинства участников форума нет ошибок или предупреждений, которых можно связать с данной проблемой.

[x2sp]

inok_dexter, подскажите.
1) Были у вас следующие сервисы:
msaccess , linked server, терминальные клиенты с 2003 или локальные пользователи XP?
2) Помните ли Вы момент когда у Вас начали возникать такие проблемы?
3) С чем Вы связываете данную ситуацию?

[inok_dexter]

x2sp,
1. Нет, данных сервисов не было.
2. Появилось спонтанно примерно в середине августа.
3. Перед проблемой в журнале SMBServer -> Operational возникала ошибка:

Event 1031: "The server detected a problem and has captured a live kernel dump to collect debug information.
Event 1032: "The server detected a problem but was unable to capture a live kernel dump to collect debug information."

И также как и у Вас сервер при перезагрузке висел на слове "Перезагрузка". Помогал только обычный резет.

[x2sp]

inok_dexter, ошибки 1032 нами тоже были зафиксированы, но с одной поправкой.
Они появляются уже после появления проблемы, спустя 2-3 минуты.

[dmitrius8]

x2sp, у меня похожая проблема... появилась пару недель назад, с тех пора папки пользователей перенес на другой сервер и там спустя время началось тоже самое, в логах пусто... а все началось с того что зависла 1 папка в корне расшареных(из-за ярлыка при любом обращении к нему вешает проводник) и теперь виснут все. у меня репликация файлов, отключил сервер проработал 2 дня вместо 1го...На этом сервере ничего нет кроме папок пользователей и Лоцман КБ с MSQL базой. Сервер кажется живым при подключении к нему, но это на первый взгляд, по расшареным папка локально хожу, а вот софт сегодня запустить не смог из расшареной директории. Серв не перезагружается пока виртуалку руками не остановишь(висит завершение сеанса) при этом даже rdp не разрывает... Грешу на обновления августа\сентября т.к. ребутал сервер в сентябре и спустя неделю началось как описал выше.. Ах да 2012R2 оба сервера, первый сервер который ранее был основным сейчас не виснет..
Ключи в реестре майкрософт позиционирует как временное решение и выпустило обновление для 2012R2 - KB2955164 на первом сервере оно у меня стояло.
почитать тут: support.microsoft.com/ru-ru/help/2957623/cannot-access-shared-files-or-folders-on-a-drive-in-windows-server-201
в общем я остановил процессы Лоцман КБ с базой и поставил патч, вечером перезагружу серв и буду наблюдать, опять...

[x2sp]

dmitrius8, боюсь что в данном "сучии", необходимо подходить с другого угла.

https://docs.microsoft.com/en-us/troubleshoot/wind...

Так как ошибки 1020 описанные ранее у нас появлялись, мы смогли обнаружить дамп в -
%SystemRoot%\LiveKernelReports

Но выявить причину не смогли и решили пока отложить. Дамп формируется спустя некоторое время (от 10 минут), поэтому для его появления необходимо будет подождать. Возможно его появление уже не связано с нашей проблемой, так временной штамп отличается от старта проблемы.
Одни раз застал момент отвисая жесткого диска. Был подключен по RDP и вся система не была доступна в течении 20-40 секунд. (Rdp сессия активно, дисконекта не было, но все оснастки были неактивны). После машина отвисла и была обнаружена проблема.

Теперь относительно статьи:
support.microsoft.com/ru-ru/help/2957623/cannot-access-shared-files-or-folders-on-a-drive-in-windows-server-201

В ней рекомендация: NET STOP SERVER. NET START SERVER
И при выполнении данных действий мы получаем зависание службы, что говорит нам о проблеме с сервисом smb.

Добавление данных ключей позволяет отключить лизинг для протокола smb2, что возможно могло решить данную проблему.

На данный момент приняли решение повторно переустановить машину:

1. Обнаружил, что обновился дистрибутив от MSND с корп портала. И для установки использовал его - SW_DVD9_Windows_Svr_Std_and_DataCtr_2012_R2_64Bit_English_-4_MLF_X19-82891
   
2. Кол-во обновлений все равно более 200.
   
3. Шары переносились, через реестр.
   

Как писал ранее коллега, отключение SMB2,SMB3 мы пока не пробовали.
На данный момент 3 дня сервис работает без сбоев, посмотрим что будет дальше.

[x2sp]

dmitrius8, удивительно то, что МС загубило течнет, передвинув его в сервис QA -

href="https://docs.microsoft.com/en-us/answers/questions...">disconnection-of-access.html#answer-131151

И если раньше комьюнити делилось опытом и пыталось найти решение, то теперь они тупо отравляют сразу на платную поддержку.

Очень забавно было, когда они ссылались на сложность моего сервиса и нестандартной ситуации.

[dmitrius8]

x2sp, попробую сделать так-же как у вас, но использую немного другой образ - SW_DVD9_Windows_Svr_Std_and_DataCtr_2012_R2_64Bit_Russian_-4_MLF_X19-82917.ISO
и до этого устанавливал ру версию, но намного старше и правильно, с 15 года проблем не было в общем-то...
о результате сообщу :)

[dmitrius8]

x2sp, у Вас проблема пропала после переустановки ОС?
у меня новый сервер неделю отработал исправно и сегодня в очередной раз завис, при попытке диагностики просто ребутнулся, и логах с ошибка якобы отрубилось питание...
в дампе %SystemRoot%\LiveKernelReports ругать на srv2.sys
ах да и отключение smb2,3 мне не помогло тоже
След этап видимо WS2019.

[x2sp]

dmitrius8, да.
Ошибка пропала и уже стабильно работает в течении 3 недель. (раб. дни)
Изменения, которые были выявлены и которые могли повлиять на работу:

1) Первоначальный дистрибутив был скачен сотрудником с версией evoluation - https://www.microsoft.com/ru-ru/evalcenter/evaluat...
при переустановки был скачал с msdn аккаунта.(могу залить, если вам требуется - SW_DVD9_Windows_Svr_Std_and_DataCtr_2012_R2_64Bit_English_-4_MLF_X19-82891

2) Были до обновлены все контроллеры домена включая телеметрию

3) Вместо Kasperskyi Endpoint Security 11.4.0.233 установлен Kaspersky Security 10 for Windows Server_10.1.2.996. В ближайшее время планируем перевести на KE легкий агент для ВС.

4) Локаль РУ пока не была установлена, также диски не были слиты в 2 VHD и сейчас используем 4, access базы остались на другом сервере.

Процедуры по слиянию дисков, переноса шары с access базами, переустановки антивирусной системы и установки локали планируем после 4 рабочих недель. (т.е на следующей неделе). Они будут идти поэтапно с шагом в 1 неделю.

[dmitrius8]

x2sp, понятно.
Спасибо за предложение о образе=) посмотрел у меня имеется на портале МС данный образ.
-на этом сервере у меня нет ролей AD
-Касперский кстати такой-же версии, попробую другую версию
-Acсess базы тоже не использую

[x2sp]

dmitrius8, неправильно поняли.
Мы используем сервер только как фс, но одно из дополнительных действий после переустановки - обновлены "по полной" контроллеры домена.

[dmitrius8]

x2sp, т.е. у вы подняли версию домена и леса до максимальной для ваших контроллеров домена?
не совсем понял: "обновлены "по полной""

[x2sp]

Имеется ввиду, что было несколько критических обновлений на домен контроллерах, которые не были установлены.
В том числе определенное кол-во других обновлений, включая обновления телеметрии.
Так как понять причину ошибок мы не могли, во время переустановки FS решили также установить полностью все обновления без разбора и на домен контроллеры.

"-Касперский кстати такой-же версии, попробую другую версию"
До переустановки мы пробовали отключать KES + агент, но спустя время также получали ошибки. P.S. Правда это было еще на 2008r2...

[x2sp]

dmitrius8, 21 декабря произвели слияние шар и дисков до первоначального состояния, локализацию оставили ENG.

Проблема больше не повторилась.

[dmitrius8]

x2sp, я вывод сделал что проблема в касперском была, как говорил выше - переустанавливал ОС с нуля, но она так же висла, после того как снес KES 11.4 и поставил серверную версию проблема более не наблюдалась. аптайм 35 дней на данный момент и буквально сегодня завис сервер 2012r2 где я оставил KES 11.4. =)