Как реализовать работу с файловыми системами?

Question

[Valeriy Solovyov]

Привет всем

Вопрос:
Как реализовать(запрограммировать) работу с файловыми системами?
Начал и столкнулся с проблемой, что сам хоть все объекты в которых храниться файловая система имеют универсальный интерфейс взаимодействия. Внутри они должны быть реализованы по разному.

В linux можно подключать(монтировать) различные файловые системы. Причём у каждой файловой системы свое количество параметров и "папок" и даже последовательность исполнения комманд (+ их количество).

Примеры:

1. Простой пример:
   mount -t ntfs /dev/sda1 /mnt/win_xp
   
2. Монтирование /lxc/shared:
   mount --bind /lxc/shared /lxc/shared
   mount --make-unbindable /lxc/shared
   mount --make-shared /lxc/shared
   
   
3. Принимает 2-е директории а не одну:
   mount -t overlayfs -o rw,lowerdir=/low-layer,upperdir=/hilayer overlayfs /overlayfs
   find /overlayfs -lname '(overlay-whiteout)' -exec rm -rf {} \;
   

По сути дела у каждой файловой системы есть два состояния:

1. смонтирована
   
2. не смонтирована
   

И над каждой можно провести ограничесное количество операций:

• mount()
  
• unmount()
  
• Проверить смонтирована
  
• Remove (предварительно размонтировав)
  
  

ЗЫ:
Пишу на Го. Вот что получилось: play.golang.org/p/Ri5yAqsLu7
Конечно до работы с любой файловой системой далеко =(

Comments

[Eddy_Em]

А где собственно вопрос?

Answer 1

[Алексей Черемисин]

А еще есть ceph + rbd, где ключик и мониторы указывать хорошо
И еще xfs, где можно отдельно журнал делать
А еще всякие gpfs, lustre, gluster..., где тоже свое разнообразие...

А оно зачем собственно?! У меня, например, все в fstab записано, может быть и олдскульно, но как-то привычненько...

Comments

[Valeriy Solovyov]

Внутри другой проги нужно работать с файловыми системами. Причем не зная какая там используется(хоть sashes, хоть bind)
Так что фстаб не подходит

[Алексей Черемисин]

А! Ну если так... Что-то вроде супербакапера :-) Только не пойму, зачем столько разных систем поддерживать? Все равно, если человек что-то отличающееся от фата/нтфс/экст34 использует, то скорее всего использует не просто так, а со знанием дела и уже представляет для чего ему это нужно.

[Valeriy Solovyov]

Я использую bind, overlayfs, Aufs, btrfs

[Valeriy Solovyov]

Проблема в том, что нужно по разному готовить их

[Алексей Черемисин]

Ну а я еще ceph ext4 fat32 и xfs

[Алексей Черемисин]

И их тоже нужно по разному готовить.

[Алексей Черемисин]

В случае overlay и aufs я вообще не понимаю, зачем их монтировать вручную, кроме как на этапе загрузки в initrd

[Valeriy Solovyov]

Алексей Черемисин: в обеих есть нижний слой и верхний, которые складываются и получается совмещенный слой. Дальше можно использовать предыдущий совмещенный слой как нижний+некий верхний.

[Valeriy Solovyov]

Алексей Черемисин: Распилим Ось на три состояния: без обновления - нижний, + обновление и некие программы - верхний. Теперь сделаем это нижним слоем, добавим еще один - у нас Ось которая собирается из разных частей. Но главное, что последний верхний слой = изменениям в системе. Их можно легко переносить, обслуживать и т.д

[Алексей Черемисин]

Для этого есть снапшоты например (lvm, btrfs, ceph)... Ну и я бы не стал использовать overlayfs в высоконагруженной файловой системе - есть риск получить кирпич из-за нехватки памяти. Но здесь каждый сам себе злобный буратино. Я использую overlayfs только на бездисковых терминалах и на машинках с флеш загрузкой, которые ничего кроме логов не пишут, а если и пишут то раз в квартал очередной конфиг.

Answer 2

[uvelichitel]

Работа с файлами - golang.org/pkg/io/ioutil
Работа с системой - golang.org/pkg/syscall/#Mount
Ваш сниппет это работа с командной строкой на мой взгляд

Comments

[Valeriy Solovyov]

Эти пакеты как непосредственно работать с фс. У меня проблема, в другом.
Как внутренне представить overlayfs, bind, sshfs и так далее?