Как узнать, что файл на сервере изменился без закачки самого файла?

Question

[darst]

Здравствуйте. Как с помощью go можно узнать, что файл на сервере был изменён без закачки самого файла на локальную машину. Потому что файл может весить и 2 кб и 2гб и закачивать каждый раз не измененный файл не есть хорошо.

1. Сравнение размеров файла не подойдёт. Потому что внутри они могут быть разные.
2. Сравнение по времени создания, тоже не подойдёт.

3. Есть вариант качать n байт и сравнивать хеш с тем же количеством из локального файла.

Comments

[Mikhail Osher]

По какому протоколу идёт работа?

[darst]

ftp

[Everything_is_not_so_bad]

darst, кстати, крупные компании уже отказываются от FTP в пользу HTTP(S).

Answer 1

[Дмитрий Шицков]

Наиболее достоверный способ – при загрузке файла на удаленный сервер, прикладывать к нему хеш-сумму (или вычислять ее на сервере после загрузки автоматически). Тогда для проверки факта что файл изменился достаточно сверить хеш-суммы удаленного и локального файла.

Comments

[darst]

Да. Этот способ пока самый надёжный

Answer 2

[antonwx]

3. Есть вариант качать n байт и сравнивать хеш с тем же количеством из локального файла.

А если изменение произошло после этих N байт?
Имхо самое надёжное - сверять дату и размер + в любом случае перекачивать файл раз в некоторое время. Ну а вообще лучше всего такую проверку делать на сервере, если к нему есть доступ.

Comments

[darst]

Ну а вообще лучше всего такую проверку делать на сервере, если к нему есть доступ.

Сервер ftp. С него можно только получать и загружать в него.

А если изменение произошло после этих N байт?

А если файл в архив запихать, то при изменении файла N байт должны быть разные же?

Answer 3

[xmoonlight]

Побайтово (блоками) качайте с сервера и читайте с локального диска.
Выставите лимит для валидации байт-совпадения.

И сравнивайте между собой:
1. Совпало до лимита - файлы одинаковы, прерываем скачивание.
2. Нет - качаем до конца обновлённый файл.

Comments

[darst]

Этот вариант не рассматривается. Смысл задачи обмениваться файлами с минимальным трафиком. Если, например, файл 2 гб и в него дописать в конец 1 символ, лимит валидации N байт будет одинаковым.