Как скопировать с сервера 30 гб картинок в jpeg'e?

Question

[lxfr]

Суть вопроса такова - когда на земле еще жили динозавры, некие упоротые LSD разработчики, пользующиеся древними рунами, сделали сервер, на котором стоит Linux и сейчас там хранится 30 гб фото (эдакий "CDN" в кавычках), которые нужно оттуда скопировать и не потерять. Доступ к серверу есть по SSH. Внимание вопрос, кто предложит лучший метод выдергивания оттуда фото, чем, к примеру через MC? Я подозреваю что когда я открою MC он просто зависнет у меня :)

Comments

[Saboteur]

rsync

[Janus74]

WinSCP

[lxfr]

Janus74: Windows не использую.

[Janus74]

lxfr: возьмите аналог для линукса, в чем проблема?

[lxfr]

Janus74: linscp?

[Janus74]

lxfr: не встречал такую, но если найдете, пользуйтесь ей.

[sim3x]

lxfr: просто scp

Теоретически rsync должен скопировать быстрее

[Denis Verbin]

sim3x: и надежнее

Answer 1

[Сергей Соколов]

только rsync, только хардкор:

rsync -avz lsd_user@oldLinuxServer:///var/www/pornosite/images /home/happynewadmin/funnyPics

Ключи:

• a – рекурсия в подпаки и попытается передать и атрибуты прав файлов и линки сохранить. Наверное, тоже необязательно – можно вместо него r – только рекурсия в подпапки.
  
• v – будет подробно лить в консоль путь каждого скопированного файла. Наверное лучше убрать и вместо него q – вывод только ошибок/предупреждений;
  
• z – будет пытаться жать файлы для передачи меньшего объёма. С jpeg'ами малоэффективно. Можно забить.
  

Comments

[lxfr]

А какова вероятность что этот rsync случайно синхронизирует мою пустую папку на сервер с картинками?
А так идея хорошая. Rsync присоединится через ssh?

[Сергей Соколов]

lxfr: вероятность, как в том анекдоте, 50% – либо случайно затрёте все картинки на сервере, либо нет ¯\_(ツ)_/¯ На самом деле, затереть отсутсвующие можно было бы в Destination, если указать ключ --delete. Не перепутайте пути: сначала источник, потом назначение. rsync откуда куда Ну и попробуйте сначала на маленькой тестовой папке на сервере, а потом уже замахивайтесь на гигазы пикчеров.

[lxfr]

Спасибо, протестирую на тестовой машине вначале, я не переживу потерю 70 гб порно-фото (шутка).

Answer 2

[Владимир Франк]

А если по SFTP?

Comments

[lxfr]

1 командой он рекурсивно все поддиректории выкачает?
get /mydir ?

Answer 3

[Нурлан]

rsync
tar+split
zip+split
OpenStack Swift и заливка автоматом в хранилище(у нас так бэкапы файла в Селектел утекают)

Comments

[lxfr]

Пока склоняюсь к этому, как к наиболее простому решению:
sftp user@server
get /mydir

Answer 4

[Вася Петров]

rsync
wget

Comments

[lxfr]

С rsync пока думаю.
А разве wget может подключиться по ssh и рекурсивно сам найти и выкачать 30 гб фото? Сомневаюсь

[Вася Петров]

Просто скачать (как вариант). Если что - подмонировать домен к каталогу.

[lxfr]

Вася Петров: монтирование доменов - излишняя операция тут будет. Нужно сделать так:
легким движением и кликом мышки (ну либо легким набором в консоли 1 команды, максимум - двух), брюки превращаются в элегантные шорты.

[Вася Петров]

lxfr: монтирование домена - это вариант в случае если иначе недоступно (ttp или ftp).
Я ж просто варианты предлагаю, как ты и просил.

Answer 5

[Константин Степанов]

Тупо через WinSCP или аналогов вытаскиваем все на комп. Далее уже делаем все, что нужно.