К сожалению после перезапусков в логах обновляется только boot, и в нем сообщений об ошибках нет, только то что в первом посте. Остальные логи не меняются. (
Да, про айноды понял, что дело в количестве. exim - почтовик, копии писем сохранял. Я их и поудалял.
Команда df показывает вот что screencast.com/t/rqKxjC2122G3
Самая нижняя строка - папка в которую диск сервера примонтирован. Получается, что еще 70% айнод свободны.
Удалил содержимое /tmp и логи почтового сервера exim - уж очень разрослись. Перезагрузил, но к сожалению не помогло. В обычном режиме (не rescue) сервер по прежнему не отвечает.
@Chromium58
Практически идентичное содержание:
Очень много Jan 21 10:04:16 Debian-60-squeeze-32-minimal kernel: [10808070.874955] EXT4-fs warning (device md2): ext4_dx_add_entry: Directory index full!
Так понимаю, в какой-то папке слишком много файлов, но непонятно в какой и мешает ли это загрузке
Далее в message
Jan 21 10:04:19 Debian-60-squeeze-32-minimal shutdown[8650]: shutting down for system reboot
Jan 21 10:04:35 Debian-60-squeeze-32-minimal kernel: Kernel logging (proc) stopped.
Это время первой перезагрузки
В syslog
Jan 21 10:04:24 Debian-60-squeeze-32-minimal mysqld: InnoDB: Unable to lock ./ibdata1, error: 11
Jan 21 10:04:24 Debian-60-squeeze-32-minimal mysqld: InnoDB: Check that you do not already have another mysqld process
Jan 21 10:04:24 Debian-60-squeeze-32-minimal mysqld: InnoDB: using the same InnoDB data or log files.
Jan 21 10:04:24 Debian-60-squeeze-32-minimal mysqld_safe: mysqld from pid file /var/run/mysqld/mysqld1.pid ended
Jan 21 10:04:24 Debian-60-squeeze-32-minimal acpid: exiting
Jan 21 10:04:25 Debian-60-squeeze-32-minimal ntpd[1244]: ntpd exiting on signal 15
Jan 21 10:04:35 Debian-60-squeeze-32-minimal kernel: Kernel logging (proc) stopped.
Это попытки запустить mysql и далее перезагрузка. После в них ничего не писалось.
@Chromium58 С сетью - нет. Сделал рестарт mysql, он его остановил, а запустить не смог - failed. После этого решил сделать ребут. Какие еще логи можно посмотреть, чтобы причину выяснить?
Tue Jan 21 13:36:47 2014: Setting preliminary keymap...done.
Tue Jan 21 13:36:47 2014: Activating swap...done.
Tue Jan 21 13:36:47 2014: Cleaning up ifupdown....
Tue Jan 21 13:36:47 2014: Setting up networking....
Tue Jan 21 13:36:47 2014: Generating udev events for MD arrays...done.
Tue Jan 21 13:36:47 2014: Setting up LVM Volume Groups Reading all physical vo$
Tue Jan 21 13:36:52 2014: No volume groups found
Tue Jan 21 13:36:52 2014: No volume groups found
Tue Jan 21 13:36:53 2014: No volume groups found
Tue Jan 21 13:36:53 2014: .
Tue Jan 21 13:36:53 2014: Loading kernel modules...done.
Tue Jan 21 13:36:54 2014: Activating lvm and md swap...done.
Tue Jan 21 13:36:54 2014: Checking file systems...fsck from util-linux-ng 2.17.2
Tue Jan 21 13:36:55 2014: done.
Tue Jan 21 13:36:55 2014: Mounting local filesystems...done.
Tue Jan 21 13:36:57 2014: Activating swapfile swap...done.
Здравствуйте. Профилировать каждый сайт по отдельности несколько проблемно, сейчас их 17 на сервере, несколько из них довольно крупных. Завтра попробую поставить munin, который здесь рекомендовали, может что-то и выяснится. Если предложите какие нибудь альтернативы, или дополнительные способы, буду благодарен.
Установка nginx не помогла.
В момент недоступности сайтов снял данные с apache server status: yadi.sk/d/3ZWxkjUgGQMgf
Судя по точке перед пунктом расхода CPU, он не загружен апачем и на 1%. Количество воркеров апача не превышает настройки.
Появилось много "W", до "зависания" их было меньше, но это скорее следствие, а не причина.
В логах Apache error.log только PHP Notice, в access.log тоже ничего странного в эти моменты.