Автоматическое скачивание из файла со списком ссылок?

Question

[MrVital]

Добрый день!

Такая задача — есть текстовый файл в интернете, который содержит ссылки на файлы. Нужна программа которой можно скормить ссылку на него, а она будет автоматически скачивать эти файлы, а затем периодически следить за обновлением этого текстового файла и выкачивать новые ссылки. Может кто-то знает подходящий софт?

Answer 1

[nochkin]

wget сможет всё это сделать.

Выкачивание линков из файла:
-i, --input-file=FILE download URLs found in local or external FILE.

А что бы он не качал заново существующие файлы можно попробовать так:
-c, --continue resume getting a partially-downloaded file.

Периодически следить можно, например, из cron'a если Linux или из Windows Scheduler если Windows.

Comments

[nochkin]

Пропускать скачаные файлы даже лучше так:
-nc, --no-clobber skip downloads that would download to existing files.

То есть, это будет что-то типа такого:
Утянуть новый список в виде list.txt:

wget -O list.txt http://website.com/list.txt

Скачать файлы из него:

wget -i list.txt -nc

[MrVital]

Спасибо! Первые опыты сработали, осталось довести до ума!!!

[ipswitch]

Под Windows есть отличный планировщик nnCron:
www.nncron.ru/index_ru
Можно использовать в сочетании

[VoidVolker]

Задачка для ннкрона вот что-то типа такого:

#( Задача_152110072013
\ NoActive
Time: */10 * * * * *
SingleInstance
: temp-list S" C:\TEMP\list.txt" ;
Action:
S" http://website.com/list.txt" HTTP-GET  IF ELSE 2DROP EXIT THEN
temp-list FILE DUP                        IF ELSE 2DROP 2DROP EXIT THEN
2OVER COMPARE                             IF ELSE 2DROP EXIT THEN
temp-list FWRITE
StartIn: "C:\TEMP\savehere\"
START-APP: D:\wget\bin\wget.exe -i %temp-list% -nc
)#

[MrVital]

Сделал так:
wget -O list.txt <ссылка на txt список ссылок>
wget -P "путь для сохранения" -i list.txt -nc

далее скомпилировал bat в exe файл и заставил в планировщике периодически выполняться. Теперь все тихо и продуктивно работает, не отвлекая и не мешая окнами

[MrVital]

ipswitch VoidVolker спасибо за программу, добавил в избранное

[VoidVolker]

MrVital на здоровье ) Там еще плагинов есть куча на форуме и готовые типовые задачи.

Answer 2

[VoidVolker]

<удалено>