Как скачать файл с сайта, если ссылка на него отдает 403, но расширения браузера качают файл?

Question

[jecer_inside]

файлы подгружаются на сайт через cdn, расширения для браузера находят эти файлы (видео) и могут скачать,
но надо автоматизировать скачивание.
Ссылка на сам файл отдает 403
как скачать такой файл?

Comments

[shurshur]

Посмотреть в консоли браузера, как он скачивается, в частности, все заголовки. Часто достаточно установить браузерный User-Agent и в Referer указать тот сайт, на котором это видео открывалось.

[jecer_inside]

shurshur, как использовать Referer? Можно пример?

[shurshur]

jecer_inside, это заголовок, в документации к используемой для скачивания файлов библиотеке 100% есть примеры указания заголовков.

Answer 1

[Dimonchik]

реферер

Comments

[jecer_inside]

можно пример использования?
в python совсем недавно, не до конца понял суть инфы по referer

[jecer_inside]

import wget
video_url = 'https://demos-europe-west2.faceit-cdn.net/csgo/1-96514ad4-81ec-46df-851f-130e360a9e79-1-1.dem.gz'


def dow_wget(url=''):
    wget.download(url=url)


def main():
    dow_wget(url=video_url)

if __name__ == '__main__':
    main()

к примеру надо скачать другой файл, выдается ошибка 403 в консоле
но файл скачивается по прямой ссылке

[Dimonchik]

ищи где опция реферера в wget и пробуй

вся защита строится на паре принципов: или реферер или IP для страницы донора и скачиваемого файла

Answer 2

[rPman]

Браузер, консоль разработчика по f12, закладка network, проводишь нужные действия с сайтом, ищешь в списке подключений нужное, нажимаешь правую кнопку - копировать как - curl выбрав нужную версию ОС

полученная строка повторит запрос браузера с точностью до заголовков.