Как реализовать параллельный процесс с возможностью прерывания изнутри?

Question

[Вячеслав Грачунов]

Есть функция которая выполняется над набором значений. Выдаёт либо это значение (подтверждено) либо None
Нужно чтобы по набору 25 подтвержденных значений оно останавливалось и выдавало список.
Сейчас реализовано на joblib Parallel
Соответственно полный перебор всех значений. И после фильтрация None и обрезка до 25.
Если сделать последовательно простым for, то это медленно.
А если joblib, то обрабатывает только полностью и тоже выходит не очень быстро.
Возможно ли как-то сделать то, о чем я говорю или взаимоисключающие параграфы?

Answer 1

[Вячеслав Грачунов]

На ЛОРе подсказали imap_unordered - подошло

Answer 2

[Алексей Черемисин]

Так как в питоне есть gil, то любой обект как бы тредонезависимый. Воспользуйтесь https://docs.python.org/3/library/collections.html... и считайте свои подтвержденные значения. После 25 останавливайте.