Как с помощью ssh скачать сайт весом 54гб?

Question

[veroni1337]

Здравствуйте. Мне нужно сделать бэкап сайта, скачать файлы себе на компьютер. Сайт весит 54гб. Думал сначала сжать gzip-ом, но на сервере места нет, всего 5гб свободных. Поэтому придется качать напрямую. Обычно для скачивания файлов использую scp, но сможет ли scp скачать такую большую директорию и сколько это займет времени? scp стоит 64 битный

Answer 1

[Алексей Черемисин]

Rsync, не?

Answer 2

[Zerg89]

Используй потоковое сжатие если экономитшь трафик/время(вслучае малой ширины канала)
Scp -C

Answer 3

[paran0id]

rsync с ключем --partial поддерживает докачку в случае чего

Answer 4

[Виктор Таран]

Вот тут писал как это правильно сделать
https://klondike-studio.ru/blog/bystro-skopirovat-...
и даже начал делать генератор и он даже работает частично.
https://top-engineer.com/test

Comments

[VADemon]

В случае tar через ssh можно было бы на лету рас/сжимать через zstd, первые три уровня очень легковесные.

[Виктор Таран]

VADemon, нет смысла, практически прироста нет, но нагрузку на ЦПУ дает.
Основную проблему решает и так.

[VADemon]

Виктор Таран, между серверами да, а тут пользователь домой выкачивает.

Answer 5

[AUser0]

Если на сервера есть доступ по ssh - можно архивировать с сохранением архива уже на удалённый сервер. Получится передавать меньше данных, а значит быстрее.

Answer 6

[Drno]

используй клиент filezilla
либо rsync

а насчет времени - у меня вот гигабитный канал на серверах, так что это заняло бы времени "сходить покурить"

при 100мб инете - думаю час-полтора