Исчезает место на диске, как найти виновника?

Question

[alovanton]

Присутствует хост esxi. На одном из датасторов крутится ВМ. В которой присутствует толстый диск со всем вытекающим занято 99% датастора. Лог файл напух до такой степени (5гб), что пришлось его удалить. Каждые 5 мин, что-то распухает и сжирает по 1м. Через консоль du-sh по ВМ ничего не дает, так как не изменяется занятое пространство. Куда копать не знаю. Посмотрел бы в лог файл, но его нет. ВМ перезагружать на данный момент нельзя.

Answer 1

[lakegull]

Похоже, что на ваш диск каким-то образом попали так называемые "цифровые дрожжи"

Comments

[alovanton]

lakegull
Это шутка?

[lakegull]

alovanton: Отчасти. У меня была похожая ситуация с VMWare, но я уже не помню, что было решением.

[alovanton]

lakegull
очень жаль...сейчас было б оч кстати

Answer 2

[Константин]

Посмотрите iostat на предмет загрузки IO дисков, потом iotop гляньте - какой процесс жрет IO. Зря вы конечно лог-файл удалили. Случайно базы данных никакой нет на диске? И проверьте на малварь всякую с руткитами.

Comments

[alovanton]

Константин
На датасторе находится контролер доме с файл помойкой. Да там есть базы данных 1с. Но диск толстый то есть сразу место зарезервировали.

[Константин]

alovanton: уточню, у вас отжирается место СВЕРХ установленного размера в thick-режиме?

[alovanton]

alovanton
Он распух так, что занимал 5гб и пришлось его грохнуть. Изменил ротацию логов до 2ух штук и до маленького объема, но все равно был только один и не создавался новый. Опять распух и я его удалил в надежде, что место вернется но такого не произошло.

[alovanton]

Константин
VMFS-5 475.8G 475.4G 382.0M 100% /vmfs/volumes/dc
то есть свободно 382м
В самой ВМ
/vmfs/volumes/51808b6b-b7ae6443-e788-10bf484ee5cb/dc # ls -lha
total 497271840
drwxr-xr-x 1 root root 1.9K Apr 3 18:46 .
drwxr-xr-t 1 root root 1.2K Dec 19 2014 ..
-rw-r--r-- 1 root root 27 Jul 17 2015 dc-06badfdf.hlog
-rw------- 1 root root 0 Mar 29 18:03 dc-06badfdf.vswp
-rw------- 1 root root 470.0G Apr 4 08:16 dc-flat.vmdk
-rw------- 1 root root 8.5K Apr 3 09:01 dc.nvram
-rw------- 1 root root 492 Mar 29 18:05 dc.vmdk
-rw------- 1 root root 0 Nov 24 2013 dc.vmsd
-rw------- 1 root root 4.2K Mar 31 17:48 dc.vmx
-rw------- 1 root root 0 Mar 29 18:03 dc.vmx.lck
-rw------- 1 root root 3.2K Jul 17 2015 dc.vmxf
-rw------- 1 root root 4.2K Mar 31 17:48 dc.vmx~
-rw------- 1 root root 4.1G Dec 19 2014 ru-en_win7.iso
-rw------- 1 root root 166.0M Mar 29 18:03 vmx-dc-112910303-1.vswp
Вижу, что диск 470гб, но место куда-то пропадет каждые 15мин

[Константин]

смотрите по iotop что отжирает io, запомните pid и гляньте:
ls -lth /proc/$pid/fd

[Константин]

там вам покажет в какие файлы пишется от указанного процесса. соответственно, нужно вначале найти аномальный процесс

[alovanton]

Константин
В гипере нет iotop, esxtop и по диску.

[Константин]

alovanton: так а зачем вам смотреть по гипервизору? Нужно тыкать в гостевой системе, она же отжирает выделенный ей диск

[alovanton]

Константин
Может я не поняли или рассказал.
На самом датасторе есть 1 ВМ. В ней толстый диск зарезервирован 470гб. Этот диск как был занят на 200гб так и остается. В этом датасторе был лог файл на 5гб. Я его удалил и хотел увидеть этот объем как свободный. Теперь хочу понять куда уходить место, если диск не пухнет в самой ВМ,