Как организовать бекап фотографий на сервер?

Question

[rechmp]

Добрый день.

Хочу сразу предупредить — я пользовался поиском, но ничего подходящего не нашел. Если я что -то пропустил — дайте пожалуйста ссылку.

Моя девушка — свадебный фотограф, я — любительски фотографирую пейзажи в походах.

Так получается, что образуется большое количество фотографий, у нее — 1.3тб, у меня — 400 гб, и хранить их в одном месте (на личном пк) становится неприемлемо.

У нас, у каждого свой компьютер, и дополнительно стоит сервер-nas-xbmc, на который мы сливаем фотографии. Пока что я бекаплю фотографии на сервер вручную — докидываю новые папки или полностью удаляю все что было и заливаю все снова.

Но как вы понимаете — это не совсем правильно совсем неправильно.

Поэтому я прошу у вас совета — как автоматизировать процесс (желательно не батником), или может кто поделится своим опытом?

Благодарю.

Comments

[rechmp]

На всех машинах стоит Windows 7, протянута гигабитная сеть, Нас работает 24/7, компьютеры весь световой день.

Answer 1

[FilimoniC]

1. Иметь три диска минимум: два в зеркале и один для бэкапов (бэкап и резервирование — разные вещи). Например, если из-за ошибки ФС или человека у вас пропадут файлы, они пропадут сразу во всем зеркале. Тогда бэкап актуален
2. Хранить все в разных местах (поставьте у родителей, например, компьютер, который будет «второй корзиной») c единственным диском для бэкапов (а два зеокальных — у себя дома)
3. Попробуйте средство вроде BitTorrentSync. Не могу обещать, что он побежит по локальной сети, но все же BTSync

Answer 2

[Busla]

Подозреваю, что вам нужен не бэкап, а архив ;-)
Бэкап разве что текущей работы — промежуточных результатов.
А процесс уже архивирования зависит от того, как у вас вообще организован процесс сортировки/обработки снимков.

NAS дома — не выход совершенно:
крыша потечёт, соседи сверху затопят, электричество скаканёт во всём доме. И все ваши жёсткие диски накроются одновременно. Так что бэкапить надо на что-то удалённое: облако, арендованный сервер, компьютер в другой квартире.

К слову, а так ли вам нужны такие объёмы?
Свадебный фотограф работает по найму/заказу — прав на эти полтора терабайта снимков у вашей девушки скорее всего нет. Надеяться, что клиенты потеряют свои экземпляры, и вы повторно продадите снимки — по-моему не очень серьёзно.
Вы тоже скоро в своих объёмах утонете: либо это всё надо вдумчиво тегировать… Либо смириться и хранить только действительно интересные удачные кадры, а остальное безжалостно удалять.

Answer 3

[Пума Тайланд]

Почему не батником то? Сделайте простой батник который будет доливать новые папки на нас, ну я пользуюсь к примеру backblaze.com он хранит бекап в облаке стоит 5 баксов в месяц на комп и не имеет ограничения на объем, по крайней мере моими 2 терабайтами он не подавился.

Comments

[mihavxc]

А скорость аплоада какая?

[Пума Тайланд]

А какая разница, бекапится все само ихней программой.

[sevmax]

y backblaze высокая скорость закачки. Мои 20 Мбит использоались полностью.

[mrpsycho]

это лучшее решение для дома, если компьютер один. сам его использовал, пока жил с фотографом.
к сожалению, не годится если есть НАС. там спасает crashplan)

Answer 4

[Владислав]

У меня стоит SyncToy 2.1 от Microsoft.

Answer 5

[Павел Галкин]

На ум приходил только ownCloud. Ссылка на обзор и клиент ниже. Единственное сомнение — количество, никогда не пробовал синхронизировать столько.

habrahabr.ru/post/154047/
owncloud.org/sync-clients/#windows

Comments

[librarian]

C большим количеством файлов и с большим количеством данных ownCloud работает ужасно.

Answer 6

[Enchant]

Советую использовать Хранилище Selectel. Ваши фотки будут надежно храниться, вы сможете получать к ним удобный доступ откуда угодно, в том числе в виде фотогалереи в исходном качестве, вам будет легко поделиться ими с кем захотите. И оплата производиться только за реально занятое место.

Comments

[rechmp]

На сайте в калькуляторе ограничение в 1 гб, да и 3.5-4к в месяц многовато как-то.

Answer 7

[Sicness]

Посмотрите labs.bittorrent.com/experiments/sync.html

Comments

[nixil]

опыты говорят, что на слабых машинах(aka NAS) при размере папки более 100 гигов и большом количестве файлов — плохо работает.

Answer 8

[rinx]

1. Для бэкапа на локальное хранилище использую Genie Timeline (http://habrahabr.ru/post/135181/)
2. Для бэкапа в облако использую Crashplan Backup(http://habrahabr.ru/sandbox/40774/) — неограниченное пространство. Можно бэкапить с компьютера «друга», а именно- с компьютера вашей девушки. Есть клиенты для разных платформ.

Как раз использую эту связку для бэкапа фотографий. Нареканий нет.
Очень советую.

Answer 9

[pomeo]

Вам идеально бы подошёл seafile.com, но единственная платная серверная версия seafile.com/en/download/ как раз под windows

Comments

[sevmax]

Я пользовался seafile, пока однажды он попросту не перестал работать. Перешел на owncloud.

Answer 10

[nixil]

Я использовал для подобных целей http://www.goodsync.com
оно и на S3 заливало и в локальный NAS

Answer 11

[alexpaknix]

Если фото не нужны каждый день или даже месяц, то можно писать на ленту. Правда это совсем не бюджетный вариант :)

Answer 12

[Николай Турнавиотов]

Фликр выдаёт терабайт места под фотки. cr2 от Кенона у меня залить не получилось, только стандартные jpg и т.п.

Comments

[Busla]

Для jpeg и т.п. можно Яндекс.Фотки использовать — там вообще без лимитов.

[Николай Турнавиотов]

Терабайт для Jpeg'ов тоже, мягко говоря, очень много.
При размере Jpeg фотографии в среднем в 3,5 мегабайта от моего 8 мегапиксельного Canon 350D мне страшно считать, сколько миллионов фотографий туда можно загрузить, мы как-то считали, получалось чуть ли не полтысячи фотографий в сутки ежедневно за вычетом 8 часового сна на лет 5, кажется, хватало.
PS Что-то у меня сервисы на территории СНГ особого доверия не вызывают, даже монстры вроде Яндекса.

Answer 13

[Ичи Ня]

Я использовал для синхронизации файлов локального ПК и сервера (скидывал на сервер для доступа остальным) программу Allway Sync 'n' Go Pro. В бесплатной версии ограничение на количество файлов. При первой синхронизации создает базу в скрытой папке. При синхронизации 100к файлов потратила на сравнение около 1-2 часов. Работает быстро и имеет много настроек. Плюс есть планировщик. Я на работе настроил, чтобы скидывал на сервак в обед, пока меня не было за рабочим местом. При ошибке выдает уведомлении (например, изменился исходный файл или папка удалена, многие вариантов сценариев для обработки уведомлений).

У её три минуса:
1. Платная, но цена небольшая.
2. Создает файлы в папке (база файлов в скрытой папке).
3. Только для Windows, но копировать может на любые носители (usb, ftp, smb и другие).