Кто нибудь использует версионирование в s3 для бекапов?

Question

[Пума Тайланд]

Может уже есть готовые скрипты для бекапов с версионированием, чтобы вручную не думать об инкрементальности и бекапить сайт одной командой?

Answer 1

[Tonik]

duplicity.nongnu.org/index.html может использовать S3 как бэкенд. Лично попробовать руки еще не дошли, но отзывы слышал только хорошие.

Comments

[Пума Тайланд]

Важна сама нативная работа с версионированием, а не стороннее решение.

[Tonik]

Честно говоря тогда не понял вашего вопроса. Если вам нужно просто готовое решение, для инкрементного бэкапа сайта, на S3, то duplicity прекрасное решение.

Если хотите создать свой ПО, для этих целей, то не совсем понял причем здесь S3. Если вы научите ваше ПО, получать diif от прошлой версии бэкапа (тут опять же стоит смотреть исходники duplicity или www.cis.upenn.edu/~bcpierce/unison/), то скинуть его на S3 это уже 1% сложности.

[Пума Тайланд]

Зачем нужен дифф?
Я имел ввиду встроенную версионность в s3.
doc.s3.amazonaws.com/betadesign/Versioning.html

[Tonik]

ох ты. Просто не знал про этот API. Спасибо за новую информацию. Тогда, конечно, не в тему вам ответил.

Answer 2

[rzerda]

Сайт уже хранится на S3, или на обычной ФС, а в S3 планируется держать только резервные копии?

Если второе, то скорее всего действительно проще будет использовать что-то типа duplicity. Готовое, местами даже проверенное решение в деле резервного копирования лучше, чем что-то, сооружённое на коленке за полдня :).

Если первое, то версионирование удобно использовать разве что для быстрого лечения пользовательских ошибок (случайно затёр не тот файл), ИМХО. Ибо есть у S3 такое мерзкое ограничение, как 1000 элементов в ответе на запрос. Т.е., одним простым движением получить список объектов со всеми их версиями, чтобы потом его разобрать и построить, скажем, «снимок» сайта по состоянию на определённый момент времени, не получится, придётся изгаляться и учитывать достаточное количество крайних случаев. Зато да — можно будет получить снимок файлов сайта вообще на произвольный момент времени, а не раз в час/сутки, как при традиционном бекапе. Только стоит ли овчинка выделки?

Comments

[Пума Тайланд]

Я думаю это делается очень легко, и можно делать красивые бекапы одной командой без постороннего софта.