maxwolf

Если нужно только то, что видно через http, то подойдет wget (ключи -S -N)
Если всё, то нужен доступ к этому "всему" (через ftp, ssh, webdav...). Тут есть разные варианты. Я использую unison (он кроссплатформенный и довольно быстрый)