Наш основной процесс загружает несколько гигабайт входных данных, а затем запускает (разветвляет) кучу воркеров для обработки разных их частей. Последний рабочий пакет запускается значительно позже первого, но ни один из них не начинает работать, пока не будут запущены все.
Это не только тратит время, но и создает нежелательную синхронизацию. Есть ли способ заставить каждого рабочего работать сразу после разветвления, не дожидаясь, пока пул завершит разветвление всех своих братьев и сестер?
Использование python-3.13 в Linux...
Могут ли работники многопроцессорного пула сразу приступить к работе? ⇐ Python
Программы на Python
1778545900
Anonymous
Наш основной процесс загружает несколько гигабайт входных данных, а затем запускает (разветвляет) кучу воркеров для обработки разных их частей. Последний рабочий пакет запускается значительно позже первого, но ни один из них не начинает работать, пока не будут запущены все.
Это не только тратит время, но и создает нежелательную синхронизацию. Есть ли способ заставить каждого рабочего работать сразу после разветвления, не дожидаясь, пока пул завершит разветвление всех своих братьев и сестер?
Использование python-3.13 в Linux...
Ответить
1 сообщение
• Страница 1 из 1
Перейти
- Кемерово-IT
- ↳ Javascript
- ↳ C#
- ↳ JAVA
- ↳ Elasticsearch aggregation
- ↳ Python
- ↳ Php
- ↳ Android
- ↳ Html
- ↳ Jquery
- ↳ C++
- ↳ IOS
- ↳ CSS
- ↳ Excel
- ↳ Linux
- ↳ Apache
- ↳ MySql
- Детский мир
- Для души
- ↳ Музыкальные инструменты даром
- ↳ Печатная продукция даром
- Внешняя красота и здоровье
- ↳ Одежда и обувь для взрослых даром
- ↳ Товары для здоровья
- ↳ Физкультура и спорт
- Техника - даром!
- ↳ Автомобилистам
- ↳ Компьютерная техника
- ↳ Плиты: газовые и электрические
- ↳ Холодильники
- ↳ Стиральные машины
- ↳ Телевизоры
- ↳ Телефоны, смартфоны, плашеты
- ↳ Швейные машинки
- ↳ Прочая электроника и техника
- ↳ Фототехника
- Ремонт и интерьер
- ↳ Стройматериалы, инструмент
- ↳ Мебель и предметы интерьера даром
- ↳ Cантехника
- Другие темы
- ↳ Разное даром
- ↳ Давай меняться!
- ↳ Отдам\возьму за копеечку
- ↳ Работа и подработка в Кемерове
- ↳ Давай с тобой поговорим...
Мобильная версия