slurm 相关问题

SLURM是一个开源资源管理器，专为各种规模的Linux集群而设计。

如何在阵列作业中使用所有逻辑处理器？

我正在尝试在 slurm 中运行一个包含 2700 个任务的数组作业。我使用的计算机有 48 个物理核心和 96 个逻辑核心。然而，当我运行我的脚本时，每个任务都与 2 个 CPU 相关联，安装...

bash slurm

回答 1 投票 0

由于 cgroup.conf 解析错误，SLURM slurmd 服务无法在 Raspberry Pi 5 集群上启动

我有一个 Raspberry Pi 5 集群，设置了一个主节点和一个工作节点。我在主节点上成功安装了 SLURM，目前我正在尝试将 slurmd 守护进程配置为在

linux cluster-computing slurm raspberry-pi5 debian-bookworm

回答 1 投票 0

如何指定输入名称为 000 到 999 的 slurm 作业数组

我使用 split -a 3 命令生成了输入文件，以便将它们称为输入_000.txt 输入_001.txt ... 输入_999.txt 但是，当使用 sbatch --array=000-999, 000 自动提交时

jobs slurm

回答 1 投票 0

在 DeepSpeed 和 Hugging Face Transformer 中加载预训练模型和文件锁定的问题

我目前正在开发一个涉及 MobileVLM 模型的项目，使用 Hugging Face Transformers 库来加载预训练模型。我在 SLURM c 上运行脚本时遇到问题...

huggingface-transformers slurm

回答 1 投票 0

Slurmd 无法启动并出现以下错误： fatal: 无法确定此 slurmd 的 NodeName

我正在尝试在一堆 aws 实例上设置 slurm，但是每当我尝试启动头节点时，它都会出现以下错误： fatal：无法确定此 slurmd 的 NodeName 我已经设置了

slurm

回答 3 投票 0

如何优化 SLURM 脚本，以便为大型预训练网络和使用 PyTorch 的模型使用更多 GPU？

我们学校有一台带有多个 GPU 的 HPC，我正在尝试找出如何利用更多 GPU 来更快地运行我的代码，但是我在批量大小 128 时不断遇到此错误：追溯（最推荐...

deep-learning pytorch neural-network gpu slurm

回答 1 投票 0

不可能的CPU核心/线程配置

我正在尝试设置 slurmd 的测试实例，但似乎无法让它接受我的 CPU。这是 lscpu 的输出：架构：x86_64 CPU 操作模式：32 位、64 位一个...

slurm

回答 2 投票 0

Slurm - 如何自动将 --mail-user 设置为当前用户？

我有一个 SLURM 文件，例如 #!/bin/bash #SBATCH -n 1 # 两个核心 #SBATCH --mem=1G # 内存 #SBATCH --time=01:99:99 # 总运行时间限制 (HH:MM:SS) #SBATCH --邮件-

slurm

回答 2 投票 0

无法从 slurm REST API 提交 GRES 值

我一直在尝试通过 REST API 提交 slurm GRES 标志，但是，我找不到通过 REST API 执行相同操作的方法。我使用的是解析器版本0.0.40 这难道不是……

slurm

回答 1 投票 0

使R代码（dada2包）在HPC计算机上多线程运行（通过slurm提交）

我的 R 代码无法在 HPC 集群上并行运行，我不明白为什么。根据dada2文档，如果为multithreaded = #标志指定了一个整数，它将被传递给

r multithreading parallel-processing slurm hpc

回答 1 投票 0

使用带换行的替换符号进行slurm

我使用 --wrap 选项向 slurm 提交一个脚本，但我也希望它向日志文件添加运行时间。批\ -J 名义 \ --mem=16G \ -c 4 \ -t 24:00:00 \ -p

slurm

回答 1 投票 0

显示帐户所有成员的使用情况的 SLURM 命令是什么？

我尝试了“sacct -A ----allusers format=User,JobID,CPUTime,MaxRSS,Elapsed” 然而，它显示了该帐户的每个用户的每个作业的资源使用情况，而我...

bash cluster-computing slurm hpc

回答 1 投票 0

使用 slurm 阵列作业

我有一个作业脚本，它运行某个 python 脚本，并使用 argparsing 提供的参数。我知道当我想要运行这项工作时，我几乎总是想要提交不仅仅是一项工作，而是七项......

arrays jobs slurm sbatch

回答 1 投票 0

如何在NextFlow中自定义执行器

我修改了Slurm指令，但是nextflow中有一个默认的SlurmExecutor，我可能需要修改或覆盖SlurmExecutor。使用IDEA maven，不知道@Generate用的是什么工具

groovy slurm executor nextflow

回答 1 投票 0

与 HPC/Slurm 交互工作时将 VS Code 终端附加到 R 脚本

我通过 VS Code Web 连接到 HPC 集群。然后，我使用 salloc 请求资源，然后可以使用 srun 或 ssh 启动交互式会话，如此 SO 响应中所述。哈...

r visual-studio-code slurm

回答 1 投票 0

SLURM 执行器插件错误：SLURM 会计已禁用

我正在尝试使用snakemake版本8+提供的slurm执行器插件运行5个静态节点并行集群snakemake工作流程。我开发了我的 Snakefile 并使用以下命令......

plugins slurm snakemake executor

回答 1 投票 0

使用 slurmdbd 进行 Slurm 会计

我设置了一个 slurm 测试集群并想要启用记账。我可以提交并运行作业。但是 sacct 返回一个空表。我的 slurm_acct_db 数据库中的表 cluster_job_table 是空的...

slurm

回答 1 投票 0

使用 sbatch 提交作业时保存 slurm 作业 ID

有没有办法用 sbatch 提交作业到 slurm 并将作业 id 记录到变量中？ job_id = sbatch --account my_account some_script.sh 回显$job_id 17210254

shell slurm

回答 1 投票 0

在多个 slurm 文件中的一个节点上启动多个作业

我想使用 slurm 告诉服务器它可以在每个节点上放置多个作业（直到最大或直到给定阈值）。我想为每个作业使用一个 slurm 文件（和一个 sbatch 命令）来完成此操作。埃夫...

bash jobs slurm

回答 1 投票 0

有什么方法可以让slurm报告任务重启次数，或者只报告作业重启次数？

我正在运行一个包含许多任务的 slurm 阵列作业。每个任务都可能失败并重新启动，并且每个任务需要知道它已经重新启动了多少次。我希望环境变量

slurm

回答 1 投票 0

slurm 相关问题

最新问题