Почему доступно 0 байт на диске?

Question

[i_goodwin]

Добрый день!
Столкнулся с проблемой, система не дает создавать/изменять файлы, ругаясь, что нет свободного места на диске (устройство /dev/sda1).

Файл.система    1K-блоков Использовано  Доступно Использовано% Cмонтировано в
udev              1582156            0   1582156            0% /dev
tmpfs              320900         6864    314036            3% /run
/dev/sda1       151124164     23130188 120294216           17% /
tmpfs             1604492          104   1604388            1% /dev/shm
tmpfs                5120            4      5116            1% /run/lock
tmpfs             1604492            0   1604492            0% /sys/fs/cgroup
/dev/loop1           3968         3968         0          100% /snap/yandex-weather-cli/215
/dev/loop0         114432       114432         0          100% /snap/core/13250
/dev/loop3           3840         3840         0          100% /snap/yandex-weather-cli/203
/dev/loop2          56960        56960         0          100% /snap/core18/2409
/dev/loop4          56960        56960         0          100% /snap/core18/2344
/dev/loop5         116736       116736         0          100% /snap/core/13308
/dev/sda1      1922727728   1860024188         0          100% /mnt/data1
cgmfs                 100            0       100            0% /run/cgmanager/fs
tmpfs              320900           20    320880            1% /run/user/116
tmpfs              320900            0    320900            0% /run/user/1000

Место свободное есть, но никому из пользователей, кроме root ничего не изменить. При этом права на папку есть. Лет 5 все работало, и на тебе :)
Уважаемые линуксоводы, подскажите, куда копать. Диск проверил на наличие проблем, все ок. Монтируется автоматически.
Файл fstab:

# /etc/fstab: static file system information.
#
# Use 'blkid' to print the universally unique identifier for a
# device; this may be used with UUID= as a more robust way to name devices
# that works even if disks are added and removed. See fstab(5).
#
# <file system> <mount point>   <type>  <options>       <dump>  <pass>
# / was on /dev/sda1 during installation
UUID=dd634609-7e9b-4fa8-b872-45d1390f27d8 /               ext4    errors=remount-ro 0       1
# swap was on /dev/sda5 during installation
UUID=ab7eec84-030f-403f-bb0b-8b032338c95a none            swap    sw              0       0
UUID=bd40c62f-950b-4c1b-5676-2109b793d04a /mnt/data1 ext4 defaults 0 0
# UUID=AEE475F2E475BCE1 /mnt/data2 ntfs rw,nls=utf8,gid=andrm,umask=0002 0 0

Ubuntu 16.10 (знаю, что старая, но для домашних нужд пока достаточно)

Comments

[AVKor]

для домашних нужд пока достаточно

Дело не в домашних или иных нуждах, а том, что для данной версии уже не выходят даже обновления безопасности.

[pfg21]

вполне возможно для root записано отсавлять 17% места...
смонтировать и почистить /var/log там всегда найдется что удалить.
посмотреть занятое место через sudo ncdu -x /

[AUser0]

Действительно, диск, примоунченный в /mnt/data1, вообще не имеет свободного места. Чистите в этой директории...

[Drno]

а разве нормально что корневой раздел смонтирован в /mnt/data???

[i_goodwin]

вот меня стало смущать, что у /dev/sda1 2 точки монтирования. Думаю, проблема в этом. Как это исправить?
У меня 2 физических диска - 160Гб с системой и 2Тб с фильмами и пр.

ls -la /dev/disk/by-uuid/
lrwxrwxrwx 1 root root  10 июн 18 19:54 ab7eec84-030f-403f-bb0b-8b032338c95a -> ../../sdb5
lrwxrwxrwx 1 root root  10 июн 18 19:54 bd40c62f-950b-4c1b-5676-2109b793d04a -> ../../sda1
lrwxrwxrwx 1 root root  10 июн 18 19:54 dd634609-7e9b-4fa8-b872-45d1390f27d8 -> ../../sdb1

sudo fdisk -l
[sudo] пароль для andrm:

Диск /dev/sda: 1,8 TiB, 2000398934016 байтов, 3907029168 секторов
Единицы измерения: секторов из 1 * 512 = 512 байтов
Размер сектора (логический/физический): 512 байт / 4096 байт
I/O size (minimum/optimal): 4096 bytes / 4096 bytes
Тип метки диска: dos
Идентификатор диска: 0x55862caf

Устр-во    Загрузочный Start Конец Секторы  Size Id Тип
/dev/sda1               2048 3907026943 3907024896  1,8T 83 Linux


Диск /dev/sdb: 149,1 GiB, 160040803840 байтов, 312579695 секторов
Единицы измерения: секторов из 1 * 512 = 512 байтов
Размер сектора (логический/физический): 512 байт / 512 байт
I/O size (minimum/optimal): 512 bytes / 512 bytes
Тип метки диска: dos
Идентификатор диска: 0x000c7642

Устр-во    Загрузочный     Start Конец Секторы   Size Id Тип
/dev/sdb1  *                2048 307337215 307335168 146,6G 83 Linux
/dev/sdb2              307339262 312578047   5238786   2,5G  5 Расширенный
/dev/sdb5              307339264 312578047   5238784   2,5G 82 Linux своп / Solaris

andrm@srv1:/etc$ mount
sysfs on /sys type sysfs (rw,nosuid,nodev,noexec,relatime)
proc on /proc type proc (rw,nosuid,nodev,noexec,relatime)
udev on /dev type devtmpfs (rw,nosuid,relatime,size=1582156k,nr_inodes=395539,mode=755)
devpts on /dev/pts type devpts (rw,nosuid,noexec,relatime,gid=5,mode=620,ptmxmode=000)
tmpfs on /run type tmpfs (rw,nosuid,noexec,relatime,size=320900k,mode=755)
/dev/sdb1 on / type ext4 (rw,relatime,errors=remount-ro,data=ordered)
securityfs on /sys/kernel/security type securityfs (rw,nosuid,nodev,noexec,relatime)
tmpfs on /dev/shm type tmpfs (rw,nosuid,nodev)
tmpfs on /run/lock type tmpfs (rw,nosuid,nodev,noexec,relatime,size=5120k)
tmpfs on /sys/fs/cgroup type tmpfs (rw,mode=755)
cgroup on /sys/fs/cgroup/systemd type cgroup (rw,nosuid,nodev,noexec,relatime,xattr,release_agent=/lib/systemd/systemd-cgroups-agent,name=systemd)
pstore on /sys/fs/pstore type pstore (rw,nosuid,nodev,noexec,relatime)
cgroup on /sys/fs/cgroup/memory type cgroup (rw,nosuid,nodev,noexec,relatime,memory)
cgroup on /sys/fs/cgroup/cpuset type cgroup (rw,nosuid,nodev,noexec,relatime,cpuset,clone_children)
cgroup on /sys/fs/cgroup/devices type cgroup (rw,nosuid,nodev,noexec,relatime,devices)
cgroup on /sys/fs/cgroup/hugetlb type cgroup (rw,nosuid,nodev,noexec,relatime,hugetlb,release_agent=/run/cgmanager/agents/cgm-release-agent.hugetlb)
cgroup on /sys/fs/cgroup/perf_event type cgroup (rw,nosuid,nodev,noexec,relatime,perf_event,release_agent=/run/cgmanager/agents/cgm-release-agent.perf_event)
cgroup on /sys/fs/cgroup/blkio type cgroup (rw,nosuid,nodev,noexec,relatime,blkio)
cgroup on /sys/fs/cgroup/cpu,cpuacct type cgroup (rw,nosuid,nodev,noexec,relatime,cpu,cpuacct)
cgroup on /sys/fs/cgroup/net_cls,net_prio type cgroup (rw,nosuid,nodev,noexec,relatime,net_cls,net_prio)
cgroup on /sys/fs/cgroup/freezer type cgroup (rw,nosuid,nodev,noexec,relatime,freezer)
cgroup on /sys/fs/cgroup/pids type cgroup (rw,nosuid,nodev,noexec,relatime,pids,release_agent=/run/cgmanager/agents/cgm-release-agent.pids)
systemd-1 on /proc/sys/fs/binfmt_misc type autofs (rw,relatime,fd=29,pgrp=1,timeout=0,minproto=5,maxproto=5,direct)
hugetlbfs on /dev/hugepages type hugetlbfs (rw,relatime)
mqueue on /dev/mqueue type mqueue (rw,relatime)
debugfs on /sys/kernel/debug type debugfs (rw,relatime)
sunrpc on /run/rpc_pipefs type rpc_pipefs (rw,relatime)
fusectl on /sys/fs/fuse/connections type fusectl (rw,relatime)
nfsd on /proc/fs/nfsd type nfsd (rw,relatime)
/var/lib/snapd/snaps/yandex-weather-cli_215.snap on /snap/yandex-weather-cli/215 type squashfs (ro,nodev,relatime)
/var/lib/snapd/snaps/core_13250.snap on /snap/core/13250 type squashfs (ro,nodev,relatime)
/var/lib/snapd/snaps/yandex-weather-cli_203.snap on /snap/yandex-weather-cli/203 type squashfs (ro,nodev,relatime)
/var/lib/snapd/snaps/core18_2409.snap on /snap/core18/2409 type squashfs (ro,nodev,relatime)
/var/lib/snapd/snaps/core18_2344.snap on /snap/core18/2344 type squashfs (ro,nodev,relatime)
/var/lib/snapd/snaps/core_13308.snap on /snap/core/13308 type squashfs (ro,nodev,relatime)
/dev/sda1 on /mnt/data1 type ext4 (rw,relatime,data=ordered)
binfmt_misc on /proc/sys/fs/binfmt_misc type binfmt_misc (rw,relatime)
cgmfs on /run/cgmanager/fs type tmpfs (rw,relatime,size=100k,mode=755)
tmpfs on /run/user/116 type tmpfs (rw,nosuid,nodev,relatime,size=320900k,mode=700,uid=116,gid=125)
gvfsd-fuse on /run/user/116/gvfs type fuse.gvfsd-fuse (rw,nosuid,nodev,relatime,user_id=116,group_id=125)
tmpfs on /run/user/1000 type tmpfs (rw,nosuid,nodev,relatime,size=320900k,mode=700,uid=1000,gid=1000)

[i_goodwin]

xotkot,

andrm@srv1:~$ lsblk -o +UUID
NAME   MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT                   UUID
sda      8:0    0   1,8T  0 disk
└─sda1   8:1    0   1,8T  0 part /mnt/data1                   bd40c62f-950b-4c1b-5676-2109b793d04a
sdb      8:16   0 149,1G  0 disk
├─sdb1   8:17   0 146,6G  0 part /                            dd634609-7e9b-4fa8-b872-45d1390f27d8
├─sdb2   8:18   0     1K  0 part
└─sdb5   8:21   0   2,5G  0 part [SWAP]                       ab7eec84-030f-403f-bb0b-8b032338c95a
loop0    7:0    0 111,7M  1 loop /snap/core/13250
loop1    7:1    0   3,8M  1 loop /snap/yandex-weather-cli/215
loop2    7:2    0  55,5M  1 loop /snap/core18/2409
loop3    7:3    0   3,7M  1 loop /snap/yandex-weather-cli/203
loop4    7:4    0  55,5M  1 loop /snap/core18/2344
loop5    7:5    0 113,9M  1 loop /snap/core/13308

[xotkot]

i_goodwin, странно, а в grub2 корневой раздел указан как UUID ? гляньте
cat /proc/cmdline

[i_goodwin]

xotkot,

andrm@srv1:~$ sudo cat /proc/cmdline
[sudo] пароль для andrm:
BOOT_IMAGE=/boot/vmlinuz-4.4.0-210-generic root=UUID=dd634609-7e9b-4fa8-b872-45d1390f27d8 ro
andrm@srv1:~$

[i_goodwin]

AVKor, да, согласен. Правда ошибся в версии - 16.04 стоит. Но и он уже не поддерживается. Машинка старая, диск еще IDE'шный. Вряд ли нормально потянет актуальные версии.

[xotkot]

i_goodwin,
попробуйте перемонтировать
sudo mount -o remount,rw /

[i_goodwin]

xotkot,

andrm@srv1:~$ sudo mount -o remount,rw /
andrm@srv1:~$ df
Файл.система    1K-блоков Использовано  Доступно Использовано% Cмонтировано в
udev              1582156            0   1582156            0% /dev
tmpfs              320900         5568    315332            2% /run
/dev/sdb1       151124164     23130568 120293836           17% /
tmpfs             1604492          104   1604388            1% /dev/shm
tmpfs                5120            4      5116            1% /run/lock
tmpfs             1604492            0   1604492            0% /sys/fs/cgroup
/dev/loop1           3968         3968         0          100% /snap/yandex-weather-cli/215
/dev/loop0          56960        56960         0          100% /snap/core18/2344
/dev/loop2         114432       114432         0          100% /snap/core/13250
/dev/loop3         116736       116736         0          100% /snap/core/13308
/dev/loop4          56960        56960         0          100% /snap/core18/2409
/dev/loop5           3840         3840         0          100% /snap/yandex-weather-cli/203
/dev/sda1      1922727728   1838974552         0          100% /mnt/data1
cgmfs                 100            0       100            0% /run/cgmanager/fs
tmpfs              320900            0    320900            0% /run/user/1000
tmpfs              320900           16    320884            1% /run/user/116

Но по-прежнему не дает ничего менять на /mnt/data1

[xotkot]

i_goodwin,

Но по-прежнему не дает ничего менять на /mnt/data1

ну так перемонтировать можете и его
sudo mount -o remount,rw /mnt/data1

похоже диски выпали в ридонли, возможно повреждение файловой системы или самих дисков ну или что-то еще, лучше пройтись fsck по ним на всякий случай

[i_goodwin]

xotkot, все равно не хочет.

andrm@srv1:/mnt/data1$ sudo mount -o remount,rw /mnt/data1
[sudo] пароль для andrm:
andrm@srv1:/mnt/data1$ df
Файл.система    1K-блоков Использовано  Доступно Использовано% Cмонтировано в
udev              1582156            0   1582156            0% /dev
tmpfs              320900         5516    315384            2% /run
/dev/sdb1       151124164     23130712 120293692           17% /
tmpfs             1604492          104   1604388            1% /dev/shm
tmpfs                5120            4      5116            1% /run/lock
tmpfs             1604492            0   1604492            0% /sys/fs/cgroup
/dev/loop0         116736       116736         0          100% /snap/core/13308
/dev/loop1          56960        56960         0          100% /snap/core18/2409
/dev/loop2         114432       114432         0          100% /snap/core/13250
/dev/loop3           3968         3968         0          100% /snap/yandex-weather-cli/215
/dev/loop4          56960        56960         0          100% /snap/core18/2344
/dev/loop5           3840         3840         0          100% /snap/yandex-weather-cli/203
/dev/sda1      1922727728   1838974552         0          100% /mnt/data1
cgmfs                 100            0       100            0% /run/cgmanager/fs
tmpfs              320900            0    320900            0% /run/user/1000
tmpfs              320900           16    320884            1% /run/user/116
andrm@srv1:/mnt/data1$ mkdir 1
mkdir: невозможно создать каталог «1»: На устройстве не осталось свободного места

А при read only руту разве даст писать? Потому что под рутом пишет.

[xotkot]

i_goodwin, хм, может и не ридонли если смотреть по lsblk (колонка RO), но явно какой-то сбой с диском на 2Т что в начале повлияло на то что в утилите df отображалось двойной sda1
а удалить с /mnt/data1 можете что-то ?

[i_goodwin]

xotkot, удалить да, могу. Создать - нет.
Тоже сначала думал диск сбоит, но ведь рут может туда писать.

[i_goodwin]

xotkot, большое спасибо! Разобрались)

[AVKor]

i_goodwin,

Вряд ли нормально потянет актуальные версии.

Без ГУЯ - потянет. Типа домашнего сервера.

Answer 1

[xibir]

попробуйте выполнить от root'а
tune2fs -m0 /dev/sda1

Comments

[i_goodwin]

andrm@srv1:~$ sudo tune2fs -m0 /dev/sda1
[sudo] пароль для andrm:
tune2fs 1.42.13 (17-May-2015)
Setting reserved blocks percentage to 0% (0 blocks)

Кажется, заработало! Можете пояснить, что сделала эта команда?)

[SagePtr]

i_goodwin, по умолчанию 5% места резервируется и доступно для записи только рутом, эта команда устанавливает резервирование в 0%, убирая ограничение.

[i_goodwin]

SagePtr, понял, спасибо!

Answer 2

[rPman]

у тебя разные диски по UUID но mtab почему то записались как /dev/sda1
В системе явный глюк, либо что то прописано хитрое в initramfs, либо просто глючит ядро с UUID, либо что то хитрое прописано в systemd *.mount файлах (никогда не пользовался но там есть такой способ)
для начала:
1. загрузись в livecd
2. проверь диски на целостность с помощью fsck
3. примонтируй корневой диск /dev/sdb1 вручную
4. убери из fstab монтирование /dev/sda1 /mnt/data1 кстати в качестве эксперимента везде укажи прямой путь к диску а не UUID (можно указывать не /dev/sdX а /dev/disk/by-id/xxx так как бывает редко но устройства могут произвольно менять порядок сегодня sda завтра sdb, например если это разные контроллеры)
перезагрузись и проверь что изменилось