Что почитать про многопоточное программирование на python?

Question

[tutunak]

Добрый день!

Стоит задача, разработать прокси чекер на питоне (на гитхабе и стековерфлоу кода полно, но хотелось бы самостоятельно разобраться). Но, т.к. чекать прокси в один поток очень медленно, встала задача, сделать многопоточность. На данный момент могу реализовать запуск нескольких версий скрипта, но хотелось, что бы сам скрипт обрабатывал список прокси многопоточно.

Следовательно вопрос, что почитать про реализацию многопоточного программирования на python (опыта программирования на других языках нет)?

Answer 1

[wiygn]

Документацию
https://docs.python.org/3.4/library/threading.html
https://docs.python.org/3.4/library/multiprocessin...

Вот, например, старая статья об IBM

Сами-то почему не гуглите?

Answer 2

[Oleg Wock]

Мне кажется, что с потоками как раз таки наоборот -- будет медленно.

Comments

[wiygn]

Ну в худшем случае в сеть упрется, почему бы не распараллелить?

[tutunak]

А почему это медленне. есть файл с 10000 адресов, 10 секунд на адрес, итого 100000 секунд - почти 28 часов... по мне если разбить в 20 потоков, то уже точно будет быстрее.

[Sly_tom_cat .]

Нет с сетевыми запросами - будет быстрее.
Через потоки можно в секунду послать больше запросов и с-но распарралелить ожидание ответов.

Answer 3

[Sly_tom_cat .]

Вот тут: Как правильно закрыть поток в python? я описал пару шаблонов по работе с потоками - вам нужен шаблон "победитель".