Потоки в python, для чего?

Question

[prochanev]

Добрый день, друзья!
Никак не могу разобраться для чего применяются потоки в python, с учетом того, что есть GIL. все примеры в интернете основаны на запуске таймера в потоках. Что вообще не дает понимания вопроса. Т.е. зачем это может понадобиться.
Если для операций IO, то есть ведь asycio.

Есть ли хорошая статья на эту тему, где было бы описано реальное применение потоков, с описанием причины их применения?

Может быть есть книга, где объясняются реальные кейсы применения?

Answer 1

[DevMan]

вопрос потоков не имеет ничего общего конкретно с питоном. это вообще из программирования как такового.
их назначение – распараллеливание операций, когда это имеет смысл.

простой пример – архиватор, файловый менеджер, утилита для нагрузочного тестирования.

Comments

[prochanev]

Вопрос именно про python с его GIL.

Answer 2

[Daniil Markelov]

Могу объяснить на практике, для чего они нужны.

Допустим, вам необходимо скачать несколько файлов с сайта. Если делать это обычным методом, то они будут скачиваться по-очереди, т.е 1 -> 2 -> 3 и т.д. Но с помощью потоков можно распараллелить этот процесс
См. пример ниже:

from threading import Thread
url = ["https://test.com/23123", "https://test.com/2343" ...]

def download(url):
     file = requests.get(url)
     with open("photo.jpg", "wb") as f:
            f.write(file.content)

for i in url:
     Thread(target=download, args=(i,)).start()

Comments

[Сергей Горностаев]

Подобные задачи как раз лучше решать с помощью asyncio.

[Алексей Guest007]

Сергей Горностаев, не факт. Допустим мне надо сделать какую-то операцию неблокирующей в контексте, к примеру, Django. Отправку СМС или еще какой запрос к внешнему API. Ради одного случая городить поддержку Celery, или впихивать asyncio неразумно. Достаточно просто отправить задачу в отдельный поток и всё.
asyncio это совсем не серебряная пуля. Каждой задаче - свой оптимальный инструмент.

[Сергей Горностаев]

Алексей Guest007, ни асинхронности, ни потоков в чистом Django быть не должно. Весь код фреймворка писался с расчётом исключительно на синхронное последовательное выполнение и может выдать фонтан гейзенбагов. Либо Celery и ему подобные, либо channels.

Answer 3

[Сергей Горностаев]

Если для операций IO, то есть ведь asycio.

Не всё можно сделать асинхронным. Например файловый ввод/вывод в Windows без блокировок можно осуществлять только в потоках.

Comments

[prochanev]

Т.е. в основном это все для задач I/O. В приоритете Asyncio, в прочих ситуациях потоки? Речь идет о Python, естественно.

[Сергей Горностаев]

prochanev, если грубо, то в данный момент (а это может измениться) для сетевого I/O стоит использовать асинхронность, для файлового - потоки, для сложных вычислений - процессы. Естественно, есть нюансы размывающие эти границы.

[prochanev]

@sergey-gornostaev
Спасибо за разъяснение!

Answer 4

[Дмитрий Темников]

https://geekbrains.ru/posts/python_threading_part1
https://geekbrains.ru/posts/python_multithreading_pt2
https://habr.com/ru/company/otus/blog/458694/

Answer 5

[LikeKey]

https://python-scripts.com/threading