Почему мой процесс Python получает пониженный приоритет/регулируется? ⇐ Python
Почему мой процесс Python получает пониженный приоритет/регулируется?
У меня возникла странная проблема: кажется, что мой процесс Python регулируется или понижается приоритет в каком-то расписании при запуске на удаленном компьютере, и работает настолько медленно, что его практически невозможно использовать.
На удаленном компьютере установлена Ubuntu с 24 ядрами и 48 потоками и Python версии 3.10.12.
Я пробовал запустить скрипт несколькими способами, например
python3 -m my_submodule.my_script args набор задач -c x,y python3 my_submodule.my_script args набор задач -c x python3 my_submodule.my_script args (где x,y — номера потоков на одном ядре)
и все они, как правило, поначалу кажутся разумными, если смотреть в режиме просмотра сверху: использование достигает почти 100% в назначенных потоках, но затем быстро падает в использовании, и скорость выполнения сценария значительно замедляется. Есть мысли о том, что является причиной этого? Эта проблема обычно возникает при запуске скриптов в подмодуле (хотя и не всегда), а не при запуске произвольных скриптов в основном репозитории. Проблема также кажется случайной, поскольку иногда она выполняется с ожидаемой скоростью на всем протяжении.
В сценарии подмодуля нет никаких сложных многопроцессорных или многопоточных операций, это, по сути, обработка цикла for и вставка данных в локальную базу данных hdf5.
У меня возникла странная проблема: кажется, что мой процесс Python регулируется или понижается приоритет в каком-то расписании при запуске на удаленном компьютере, и работает настолько медленно, что его практически невозможно использовать.
На удаленном компьютере установлена Ubuntu с 24 ядрами и 48 потоками и Python версии 3.10.12.
Я пробовал запустить скрипт несколькими способами, например
python3 -m my_submodule.my_script args набор задач -c x,y python3 my_submodule.my_script args набор задач -c x python3 my_submodule.my_script args (где x,y — номера потоков на одном ядре)
и все они, как правило, поначалу кажутся разумными, если смотреть в режиме просмотра сверху: использование достигает почти 100% в назначенных потоках, но затем быстро падает в использовании, и скорость выполнения сценария значительно замедляется. Есть мысли о том, что является причиной этого? Эта проблема обычно возникает при запуске скриптов в подмодуле (хотя и не всегда), а не при запуске произвольных скриптов в основном репозитории. Проблема также кажется случайной, поскольку иногда она выполняется с ожидаемой скоростью на всем протяжении.
В сценарии подмодуля нет никаких сложных многопроцессорных или многопоточных операций, это, по сути, обработка цикла for и вставка данных в локальную базу данных hdf5.
-
- Похожие темы
- Ответы
- Просмотры
- Последнее сообщение
-
-
Именно почему это работает таким образом? (Приоритет нулевого объединения) приоритет)
Anonymous » » в форуме Php - 0 Ответы
- 25 Просмотры
-
Последнее сообщение Anonymous
-