Почему мой процесс Python получает пониженный приоритет/регулируется?Python

Программы на Python
Ответить Пред. темаСлед. тема
Anonymous
 Почему мой процесс Python получает пониженный приоритет/регулируется?

Сообщение Anonymous »


У меня возникла странная проблема: кажется, что мой процесс Python регулируется или понижается приоритет в каком-то расписании при запуске на удаленном компьютере, и работает настолько медленно, что его практически невозможно использовать.

На удаленном компьютере установлена ​​Ubuntu с 24 ядрами и 48 потоками и Python версии 3.10.12.

Я пробовал запустить скрипт несколькими способами, например

python3 -m my_submodule.my_script args набор задач -c x,y python3 my_submodule.my_script args набор задач -c x python3 my_submodule.my_script args (где x,y — номера потоков на одном ядре)

и все они, как правило, поначалу кажутся разумными, если смотреть в режиме просмотра сверху: использование достигает почти 100% в назначенных потоках, но затем быстро падает в использовании, и скорость выполнения сценария значительно замедляется. Есть мысли о том, что является причиной этого? Эта проблема обычно возникает при запуске скриптов в подмодуле (хотя и не всегда), а не при запуске произвольных скриптов в основном репозитории. Проблема также кажется случайной, поскольку иногда она выполняется с ожидаемой скоростью на всем протяжении.

В сценарии подмодуля нет никаких сложных многопроцессорных или многопоточных операций, это, по сути, обработка цикла for и вставка данных в локальную базу данных hdf5.
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение

Вернуться в «Python»