Посоветуете скрипт или инструмент для резервного копирования linux?

Question

[Илья Т.]

Задача: необходимо выполнять резервное копирование сотен гигабайт данных (в основном фотографии) на яндекс.диск.
В силу медленности канала предполагается что я один раз (или очень редко) сделаю полную копию, а потом буду докидывать изменения. Я понимаю, что мне подойдет rsync, но самому писать для него скрипт не хочу т.к. боюсь что-то упустить и осознать это только когда потребуется восстановиться. Поэтому проверенный баш-скрипт для rsync тоже подойдет.
Желательно: шифрование архива (если нет то я умею encfs), работа с webdav, отсутствие кэша на локальном диске (мало места)
Почти идеальный инструмент для меня: duplicity, но оно очень тяжело (медленно) работает с дифференциальными бэкапами и делает очень большой локальный кэш.

Answer 1

[Илья Т.]

Вот нашел ровно то что я хотел:
https://manpages.debian.org/jessie/mrb/mrb.8.en.html

Answer 2

[Sanes]

Я понимаю, что мне подойдет rsync, но самому писать для него скрипт не хочу т.к. боюсь что-то упустить и осознать это только когда потребуется восстановиться.

Так проведите учения. Или вы никогда не тестируете результат своей работы?

Или консольный клиент https://yandex.ru/support/disk/cli-clients.html

Comments

[Илья Т.]

1. Уважаемый, я слишком давно в этом бизнесе и слишком хорошо знаю смысл поговорки "нет бэкапа без факапа". К сожалению все условия при тестировании учесть очень сложно.
2. Клиент в режиме синхронизации не дает доступа к старым версиям и не поддерживает шифрование.

[fdroid]

Илья Т., а что если подмонтировать Я.Диск как webdav и просто на него синькать посредством rdiffbackup?

[Sanes]

Илья Т.,

К сожалению все условия при тестировании учесть очень сложно.

Тогда вам ничего не подходит.

Answer 3

[Saboteur]

Если вы не можете просто rsync-ом скопировать и проверить результат, как вы можете доверять каким-то скриптам или более сложным продуктам, которые непонятно что внутри делают?

Никакой автоматический скрипт вам в данном случае не поможет.
Вы - админ. Вы должны понимать какие файлы и данные вы хотите сбэкапить, и следовательно проверить нужно в любом случае.

Answer 4

[moropsk]

Backup linux сервера с помощью Duplicity
https://serveradmin.ru/backup-linux-servera-s-pomo...

Comments

[Илья Т.]

Дуплисити прекрасный инструмент, но в самом начале я написал почему он мне не подходит.

Answer 5

[pfg21]

фотки жмутся хреново, так что упаковка в один архив не будет иметь сильного смысла.
так что вместо бекапов посоветую сделать синхронизацию с яндекс-диском.
клиента тебе уже подсказали.

если у тебя есть куда дублировать информацию, то подними syncthing (бесплатный опенсорс) или resiliosync (платный закрытый, есть бесплатная ограниченная версия).
это дальнейшее развитие темы rsync - демоны, которые постоянно отслеживают состояние файловой системы, и сразу производят синхронизацию с остальными участниками облака.
есть встроенная система версионирования - т.е. измененный файл дублируется в отдельную директорию.

это даже будет лучше, если боишься кражи с яндекса, свой NAS все-таки в своих руках, но придется вложиться в железо.

Comments

[Илья Т.]

Авторы синксинга не рекомендуют его использовать в качестве версионного инструмента резервного копирования.
https://docs.syncthing.net/users/faq.html?highligh...

[pfg21]

Илья Т., прочитай ответ точнее - "не лучшее решение в плане бекапа".
синх несколько лет назад был еще не стабильным. и демоны бывало крашились и глючили.
авторы не хотят лишней ответственности в столь важных делах.