Как скопировать скрытые файлы (RSYNC)?

Question

[V A]

Всем Привет
Переношу письма на другой сервер.
Не копируются скрытые файлы и папки
Как скопировать скрытые файлы тоже

Пользуюсь командой, (копирую файлы без создания папки maildir, т.к папки на другом сервере /var/vmail/domain/user/.., на старом /var/vmail/domain/user/.maildir/..

ls -1 /var/www/mailadmin/data/email/site.ru/ | while read u; do
rsync -avz -D -e ssh /var/www/mailadmin/data/email/site.ru/$u/.maildir/* root@12.34.56.78:/var/vmail/site.ru/$u/
done

Answer 1

[Saboteur]

ls -1A - выводит и "скрытые" папки/файлы

man ls
-a, --all:
do not ignore entries starting with .
-A, --almost-all:
do not ignore entries starting with ., but not list implied . and ..

Но в вашем случае, нужно просто копировать без указания *
rsync -avz -D -e ssh /var/www/mailadmin/data/email/site.ru/$u/.maildir root@12.34.56.78:/var/vmail/site.ru/$u

Comments

[V A]

не копирует

[Saboteur]

не верю.

ls -1A /var/www/mailadmin/data/email/site.ru/ | while read u; do
rsync -avz -D -e ssh /var/www/mailadmin/data/email/site.ru/$u/.maildir/* root@12.34.56.78:/var/vmail/site.ru/$u/
done

Все должно работать.

[Saboteur]

Уточните, что вы вообще хотите копировать?
содержимое папки .maildir?

[V A]

Saboteur:
хочу скопировать все папки с письмами,
чтобы на новом был
/domain/user/ - письма со всеми папками типа .MyArchive

на старом сейчас /domain/user/.maildir/ и папки внутри

[Saboteur]

Так вы же указываете
/var/www/mailadmin/data/email/site.ru/$u/.maildir/*

То есть копировать все из $u/.maildir/ а не из $u/

[V A]

Saboteur: в папке /.maildir/ есть папки типа: /.архив, /.работа, /.контрагент
вот у меня с их копированием проблемы

[Saboteur]

В таком случае не пользуйтесь *, просто укажите каталог

rsync -avz -D -e ssh /var/www/mailadmin/data/email/site.ru/$u/.maildir root@12.34.56.78:/var/vmail/site.ru/$u

[Saboteur]

Еще один вариант - в начало скрипта добавить

shopt -s dotglob

Тогда * будет выбирать файлы с точками.

[V A]

Saboteur: Могли бы полную конструкцию озвучить?

[V A]

так все ок, без * если

[Saboteur]

V A: Отлично =)

[V A]

Saboteur:
Может вы в курсе, как копировать файлы эти, без подтверждения пароля, просто копирую, и каждый раз при копировании каждой папки, просит пароль. Я так понял лучше это реализовать через ключи SSH ?

[Saboteur]

Ну два варианта.
Копируйте вышестоящую папку с полным содержимым, тогда это будет одна операция, один пароль на все.

Или настройте ssh ключи, для этого просто генерируете пару ключей
$ ssh-keygen
и копируете публичный ключ на удаленный сервер
$ ssh-copy-id root@12.34.56.78

После этого паролей не должно быть

[V A]

Saboteur: Спасибо, а как скопировать:
из /mailadmin/data/email/site.ru/$u/.maildir
но чтобы просил пароль на папки домена (их всего три)
так пойдет?

ls -1A /var/www/mailadmin/data/email/ | while read $d | while read $u; do
rsync -avz -e --progress /var/www/mailadmin/data/email/$d/$u/.maildir/ root@78.46.20.143:/var/vmail/$d/$u/
done

[V A]

или же скопировать папки одного домена без .maildir

[Saboteur]

Вообще не очень понял, что вы хотите сделать такой конструкцией

Чтобы понять что происходит, выполните команду:
ls -1A /var/www/mailadmin/data/email/

Увидите, что попадает в "while read $d"
но в "while read $u" уже ничего попадать не будет, так как данные считаны в $d.

Что такое папки домена?

[V A]

ну у меня есть
папки
/site1/user1/.maildir/письма
/site2/user1/.maildir/письма

я хочу перекинуть их так
/site1/user1/письма
/site2/user1/письма

но каждый раз не вводить пароль при копировании папок user1, user2 итд

[Saboteur]

V A: Ну так я же показал, как создать ssh ключи - если вы их создадите, то команды типа scp/rsync/ssh не будут запрашиваьт пароль.

[V A]

Saboteur: а возможно ли, что если я с помощью RSYNC копирую с сервера #1 файлы в сервер #2, могут ли файлы на сервер №1 измениться?

[Saboteur]

Конечно могут.
В обычном случае (если вы не используете снапшоты на какой-нить zfs), рсинг делит файл на сегменты и пересылает их с чексуммами. Если в процессе пересылки вы поменяли данные в файле в сегменте, который еще не передавался - он перешлет уже обновленный сегмент. Если файл менялся кардинально (с изменением размера), рсинк может выдать просто ошибку о том, что файл недоступен, либо переслать его целиком.

Если файлы меняются незначительно, без изменения длины, повторный rsync перешлет только измененные блоки, поэтому вы можете просто запустить rsync дважды - первый раз, чтобы скопировать файлы, второй раз, чтобы скопировать только возможные изменения (он сам их определит).

[V A]

Saboteur: Спасибо, то есть на исходном сервере (с которого копирую) в процессе копирования появится еще один файл (письмо например), то этот файл затрется?

[Saboteur]

По умолчанию rsync делает приемник таким же, как источник, но не наоборот, то есть на источнике ничего затираться не будет.

Но почитайте справку по rsync, там есть опции для двухсторонней синхронизации.

[V A]

Saboteur: спасибо большое!