Не скачивает сайт wget?

Question

[xxx]

Хочу получить файлы html,css,js .
Сайт: www.horstdiekgerdes.com
Команда : wget --page-requisites -r -l 10 www.horstdiekgerdes.com
Получаю только 4 файла: about, index.html, robots.txt, favicon.ico
Что не так?

Answer 1

[Dimonchik]

1) + домен скарспейс www.horstdiekgerdes.com/sitemap.xml
2) + опция "игнорировать роботс"
3) + закосить под браузер (задай юзерагента)
4) - если там JS, wget его не обработает

Comments

[xxx]

wget --page-requisites -D squarespace.com -e robots=off -r -l 10 --user-agent "Mozilla/5.0 (X11; Ubuntu; Linux x64_64; rv:11.0) Gecko/20100101 Firefox/11.0" www.horstdiekgerdes.com
Получаю только index.html