Как можно скачать файлы из списка текстового файла?

Question

[Андрей Стрелков]

Добрый день, подскажите пожалуйста, как можно скачать огромное количество файлов по ссылкам из текстового документа?

Имеется подобный список:

http://mysite.ru/0/0/0.png
http://mysite.ru/0/1/0.png
http://mysite.ru/1/0/0.png
http://mysite.ru/1/0/1.png
http://mysite.ru/1/1/0.png
http://mysite.ru/1/1/1.png
http://mysite.ru/1/2/0.png
http://mysite.ru/1/2/1.png
http://mysite.ru/2/0/0.png
http://mysite.ru/2/0/1.png
http://mysite.ru/2/0/2.png
...

Строк более 5 млн., нужно причём их скачать таким образом, чтобы сохранить аналогичную иерархию папок, т.е. на выходе должно быть

c:/temp/mysite.ru/0/0/0.png

А также, в случае недоступности файлов, было определенное количество попыток скачать его снова, т.е. пытаться скачать до победного

Comments

[15432]

что-то вроде
wget -i links.txt -x

или любым качальщиком сайтов, их немеренное количество