Почему утекает память в скрипте?

Question

[Артур Бекеров]

Есть обычный цикл loop.
В цикле с помощью urllib.urlretrieve (image_url, filename) выкачиваются файлы ~150 мб каждый. На панели виртуального сервера вижу постоянно возрастающее потребление оперативной памяти и после остановки скрипта эта память не очищается.

Почему питон выжирает память и каким образом ее чистить?

Answer 1

[gmlexx]

Подозреваю, что Питон тут совсем не при делах. Скорее всего файлы, которые он записывает на диск кэшируются ОС в память, чтобы при дальнейшем обращении к этим файлам не обращаться к диску.
Но если память кому-то срочно понадобится, то ОС ее освободит.

Comments

[Артур Бекеров]

верно, в top'e процесс питон занимает самый минимум.

Answer 2

[leclecovich]

Посмотрите в сторону requests и параметра stream=True: docs.python-requests.org/en/latest/api/#main-interface

Answer 3

[Константин Волков]

не знаю