ChildProcessCrashException при многопроцессном выполнении Dagster при развертывании Docker с несколькими контейнерами ⇐ Python

[Anonymous]

У меня есть работа в Dagster по обучению CNN (с использованием Keras). Операция, запускающая fit(), вызывает следующую ошибку:

Код: Выделить всё

Multiprocess executor: child process for step train unexpectedly exited with code -9
dagster.core.executor.child_process_executor.ChildProcessCrashException

Stack Trace:
File "/usr/local/lib/python3.7/site-packages/dagster/core/executor/multiprocess.py", line 163, in execute
event_or_none = next(step_iter)
,  File "/usr/local/lib/python3.7/site-packages/dagster/core/executor/multiprocess.py", line 268, in execute_step_out_of_process
for ret in execute_child_process_command(command):
,  File "/usr/local/lib/python3.7/site-packages/dagster/core/executor/child_process_executor.py", line 157, in execute_child_process_command
raise ChildProcessCrashException(exit_code=process.exitcode)

Дополнительные выходные данные не выдаются. Я использую локальное развертывание Docker с несколькими контейнерами.
Что пробовал:

• Я запускаю код локально (не -Docker) с помощью Execute_in_process(), и это работает без ошибок.
• Из-за упоминания исполнителя и мультипроцесса в трассировке стека я попытался настроить выполнение в in_process, но это просто зависает.

Будем очень благодарны за любые советы.

Подробнее здесь: https://stackoverflow.com/questions/702 ... -container