Могут ли работники многопроцессорного пула сразу приступить к работе?Python

Программы на Python
Ответить
Anonymous
 Могут ли работники многопроцессорного пула сразу приступить к работе?

Сообщение Anonymous »

Наш основной процесс загружает несколько гигабайт входных данных, а затем запускает (разветвляет) кучу воркеров для обработки разных их частей. Последний рабочий пакет запускается значительно позже первого, но ни один из них не начинает работать, пока не будут запущены все.
Это не только тратит время, но и создает нежелательную синхронизацию. Есть ли способ заставить каждого рабочего работать сразу после разветвления, не дожидаясь, пока пул завершит разветвление всех своих братьев и сестер?
Использование python-3.13 в Linux...
Ответить

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

Вернуться в «Python»