Как увеличить число подключений R > 128 с помощью «пакетного» файла .sh в Linux на удаленном кластереLinux

Ответить
Anonymous
 Как увеличить число подключений R > 128 с помощью «пакетного» файла .sh в Linux на удаленном кластере

Сообщение Anonymous »

Здесь пользователь R, который плохо владеет Linux, но использует его для отправки заданий в удаленный кластер. Недавно я получил доступ к удаленным узлам кластера с 256 потоками (128 разделенных ядер) на узел и хочу параллельно запускать задания, запрограммированные на R (и Rcpp), используя «параллельный» пакет R.
Когда я напрямую взаимодействую с узлом и даю команду увеличить число соединений, как рекомендовано здесь:
R --max-connections-512
https://search.r-project.org/CRAN/refma ... tions.html
... нет проблем.
Однако , когда я отправляю свое задание для запуска на неинтерактивном узле с помощью команды «sbatch» с использованием файла .sh, этот подход не работает. Если я попробую выполнить приведенную выше команду, я думаю, что R распознает, что я не использую прямой интерфейс, и скажет мне использовать «ванильный», «сохранить» или «без сохранения», но когда я пытаюсь добавить их, он говорит, что игнорирует « --max-connections-512".
Скажите, пожалуйста, как дать команду R увеличить максимальное количество подключений в удаленном кластере через файл .sh, отправленный "sbatch" команда в Linux?
Мне удалось выполнить эту команду на прямом интерфейсе с узлом в кластере:
R --max-connections-512
Изображение

Однако, когда я пробую ту же команду "R - -max-connections-512" на .sh с помощью команды sbatch Linux, он не работает. Если я использую его напрямую, он говорит, что требуется «ванильное» «сохранение» или «без сохранения».
[img]https://i. sstatic.net/HlPYXb2O.jpg[/img]

Если я добавляю в команду «Vanilla», он говорит, что игнорирует инструкцию «max-connections».
Изображение

Пожалуйста см. ниже
Изображение
текущую попытку кода Linux в файле .sh, в котором «--max-connections» игнорируется.

Подробнее здесь: https://stackoverflow.com/questions/793 ... remote-clu
Ответить

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

Вернуться в «Linux»