Ls зависает на маленьком количестве файлов. Что делать?

Question

[kashtanoff]

ls -f в корне выдает около 30-40 файлов
ls намертво виснет
mc виснет

iotop в это время выдает
Total DISK READ: 78.00 B/s | Total DISK WRITE: 48.19 K/s
в топе висит jbd2/md2-8

Проблема появилась недавно, что делать не ясно.

Answer 1

[brutal_lobster]

ls выполняете на md2?
Посмотрите на чем именно виснет, логи и прочее

strace ls
dmesg
cat /proc/mdstat
mdadm --detail /dev/md2

Comments

[kashtanoff]

strace ls не зависает
strace ls -l зависал на чтении директории /backup_mnt

/backup_mnt примонтирована в fstab так
//******.your-backup.de/backup /backup_mnt cifs iocharset=utf8,rw,credentials=/etc/backup-credentials.txt,uid=bacula,gid=bacula,file_mode=0660,dir_mode=0770 0 0

на неё было настроено резервное копирование bacula

пробовал отмонтировать - не дает, пишет устройсво занято
демоны бакулы остановил вечером, демонтирование не заработало

сейчас ls работает, изменений не делалось

ls -l выдает такую строчку
d????????? ? ? ? ? ? backup_mnt

[brutal_lobster]

lsof | grep 'backup_mnt'
umount -l /backup_mnt

[kashtanoff]

lsof: WARNING: can't stat() cifs file system /backup_mnt
Output information may be incomplete.

umount -l /backup_mnt сработал

В чем может быть причина такого поведения?
Изначально такой проблемы не было.

[brutal_lobster]

Дык вечная проблема с сетевыми шарами. Сервер отвалился, а клиент этого не понял.

Посмотрите в /proc/{pid}/fd/ - кто всё таки держит открытый файл на шаре - может бакула умерла не полностью. И поубивайте это всё дело.
+ не понятно, зачем такая хитрая схема с cifs(!!!) шарой и бакулой. У бакулы же есть встроенный remote backup

[kashtanoff]

brutal_lobster: Хостер дает отдельный бэкап сервер с доступом по ftp/cifs/samba, remote backup я так понимаю нужно устанавливать непосредсвенно а сервер с бэкапами, а такой возможности нет

[brutal_lobster]

Тогда зачем вы используете бакулу? Немного тяжеловато, по-моему)

[kashtanoff]

Решили потестировать. Используем около месяца.

Answer 2

[Влад Животнев]

cat /proc/mdstat
У вас рейд синкается.

И, включая телепатию, вы хоститесь в hetzner, используете старые серверы с SATA-II дисками, (например, EX60 или ещё что постарше - EQ какие-нибудь), ваш сервер нужно выкинуть на помойку и арендовать человеческий EX40 с SATA-III дисками (которые 6gbps).

Answer 3

[kashtanoff]

Да, hetzner.
cat /proc/mdstat все ок, не синкается насколько я понимаю
EX40 у нас