Можно ли узнать размер файла, его тип, не скачивая целиком?

Question

[Александр Разумов]

Можно ли, используя curl, узнать размер файла по ссылке(и прочую инфу) не скачивая файл целиком на сервер? Есть ли технически такая возможность. Спасибо

Answer 1

[Александр Аксентьев]

если сервер отдаёт эту инфу то да, а если на отдаёт то нет.

Зависит от того кто раздаёт файлы короче.

Ну а инфа в заголовках соответственно.

Answer 2

[Андрей Буров]

https://ru.wikipedia.org/wiki/HTTP#HEAD

Answer 3

[askhat]

Конечно, первые несколько байт файла уникальны для каждого типа, по ним можно вычислить тип. Благодаря этому свойству работает например библиотека libmagic.

https://gist.github.com/leommoore/f9e57ba2aa4bf197ebc5

Answer 4

[vman]

как вариант

curl -m 1 -sS -D - -X HEAD https://hsto.org/r/w120/webt/5a/80/fd/5a80fd8c368f0954751429.png 2>/dev/null | grep -Po '(?<=Content-Length: )(\d+)|((?<=Content-Type: )[a-z\-]+/[a-z\-]+)'

image/png
12597

HEAD не сработает если целевой сервер отдает редирект. Для такой задачи лучше реализовать небольшой скрипт или приложение.

Comments

[h8nor]

curl -m 1 -sI URL

[Вальдемар Маяковцев]

1. Заголовки могут выводиться строчными буквами (у меня сейчас так, по крайней мере), поэтому grep требует ключа -i.
   
2. В целом слишком усложнено, не думаю, что в 2018 году утилита curl не имела ключа -I.
   
3. С ключом -I (как и с конструкцией -D - -X HEAD) файл не загружается, потому и не требуется ключ -m.
   
4. С ключом -s не выдается ничего лишнего, потому и бесполезна конструкция 2>/dev/null.
   
5. В то же время не ясно, зачем ключом -S выводить ошибки, чтобы затем подавлять их перенаправлением вывода стандартного потока ошибок (2>/dev/null) — это бессмысленно.
   

Поэтому так:

$ curl -sI https://hsto.org/r/w120/webt/5a/80/fd/5a80fd8c368f0954751429.png | \
grep -Poi '(?<=content-length: )(\d+)|((?<=content-type: )[a-z\-]+/[a-z\-]+)'
image/png
16613

Answer 5

[mlatushko]

wget --spider URL

Wget for Windows ( gnuwin32.sourceforge.net/packages/wget.htm )
Wget и cURL есть в составе файлов программы для скачивания AWGG ( https://videohelp.com/software/AWGG ) пятью различными механизмами/"движками" (Windows).