Как скопировать кучу файлов без замены уже существующих?

Question

[partisan42]

Имеется два каталога. В моём конкретном случае это две довольно удалённые друг от друга машины, но это не играет особой роли.
Пару недель назад я скопировал с одной машины на другую полтерабайта файлов.
И сейчас появилась необходимость актуализировать файлы на одной из машин.
Но перекачивать полтерабайта заново не хочется. Можно конечно просто зажать shift и нажать на Нет, при вопросе о замене файлов, но как быть с ситуацией если имена файлов одинаковые, а копируемый файл свежее имеющегося? Как учесть этот момент?
Может быть, есть какой-либо встроенный инструмент для этого? Или есть какой-нибудь сторонний инструмент?

Comments

[kalapanga]

xcopy /D скопирует чего нет и обновленные.

Answer 1

[АртемЪ]

Можно использовать zpaq c созданием индекса.

Запускаете на машине куда переместили файлы - создается дедуплицированный архив, и индекс.
zpaq64.exe a ArhiveName? Path\to\files -m1 -index indexfile
Перемещаете получившийся индекс на первую машину и запускаете на ней (индекс и должен лежать в той же папке где исполняемый файл.
zpaq64.exe a ArhiveName? Path\to\files -m1 -index indexfile
получается второй том архива небольшого размера - блоки которые есть в индексе он не включает.
Копируете его на нужную машину и распаковываете ваш двухтомнй архив в нужную папку с ключиком -force чтобы перезаписывал существующие файлы.

После чего как нужно синхронизировать - делаете очередной архив на первой машине, и перемещаете его на вторую где и распаковываете. Единственный минус - необходимость хранить на второй машине архив.

Так же можно попробовать cwRsync вроде аналог Rsync но я в винде не пробовал его, насколько удобен не знаю.

Comments

[partisan42]

Любопытно:) Пошёл изучать. Спасибо:)

[АртемЪ]

Семён, Ну я таким образом архивчик всяких медиафайлов(рабочая папка дизайнеров) размером около 8тб из Новосиба в Питер гоняю. Первый раз на самолете отправили диск с архивом, ибо быстрее чем тащить по сети 4тб упакованных файлов.
А потом по сети недельные изменения - обычно два-три десятка гигабайт.

Ну и в качестве арихватора для бэкапов он очень неплох - во первых жмет хорошо за счет блочной дедупликации (там настраивается и сжатие и дедупликация), во вторых гонять по сети на удаленное хранилище удобно, в третьих на машине где создается архив не надо держать полный бэкап, только индекс.

Так же очень удобно что в арихве хранится история файлов и можно извлекать файлы по состоянию на нужную дату архивации, ну и размер архива не меняется, если в исходной папке переместили сотню гигабайт файлов из одной папки в другую.

Answer 2

[Константин Цветков]

ROBOCOPY /MIR

Comments

[АртемЪ]

Так там машина сильно удаленная, а ROBOCOPY он же по SMB вроде только, ну и тащить будет все измененные файлы, что при таких объемах довольно много.

[Константин Цветков]

АртемЪ, Семён использует Проводник, у ROBOCOPY возможностей больше, например, возобновление или повторные попытки.