slurm

PC에 Slurm을 설치할 수 없습니다
slurm

PC에 Slurm을 설치할 수 없습니다

우분투 PC에 slurm을 설치하려고 합니다. 그래서 위에 주어진 지침을 따랐습니다.여기 나는 다음을 수행했습니다 - sudo apt update -y sudo apt install slurmd slurmctld -y mkdir sudo /etc/slurm-llnl 참고로...3단계는 제가 직접 알아냈어요 sudo chmod 777 /etc/slurm-llnl sudo cat << EOF > /etc/slurm-llnl/slurm.conf ClusterName=localcluste...

Admin

slurm 클러스터에 대한 qsub와 유사한 동작
slurm

slurm 클러스터에 대한 qsub와 유사한 동작

나는 최근에 slurm으로 전환하여 qsub처럼 작동하는 작업 제출 도구를 찾고 있습니다. 파이프를 통해 입력을 받습니다. 출력을 표준 출력으로 인쇄합니다. 예: for n in `seq 1 10`; do echo "echo $n" | qsub done 각 echo 명령은 클러스터로 전송되어야 하며 출력은 1..10(아마도 무작위 순서)이어야 합니다. 지금까지는 할 수 있어요 sbatch를 사용하여 작업을 병렬로 보내지만 출력이 stdout으로 출력되는지 확실하지 않음 srun을 사용...

Admin

slurm으로 실행하면 bash의 for 루프가 무한히 실행됩니다.
slurm

slurm으로 실행하면 bash의 for 루프가 무한히 실행됩니다.

다음 코드 블록을 포함하는 edit.sh라는 bash 스크립트가 있습니다. z=$(tail -1 mol-pos-1.xyz | awk '{print $NF}') echo "before loop: z is $z" >> log for ((r=0; $(echo "$z>20" | bc -l); r++)); do echo "entering loop" >> log ll=$(tail -n 1 mol-1.restart) if echo "$ll" | grep -q...

Admin

bsub는 while 루프와 함께 사용되지 않습니다.
slurm

bsub는 while 루프와 함께 사용되지 않습니다.

다음 명령을 실행하려고 시도했지만 오류가 발생했습니다. syntax error near unexpected token `do' 주문하다: bsub -q XXX -P YYY -J ZZZ -R "rusage[mem=10000,scr=5000]" -R "span[hosts=1]" -n 2 -o lsf.out -e lsf.er while read -r line; dofilename=$(echo $line | awk '{print $1}'); content=$(echo $line | cut -d ' ' ...

Admin

작업 이름을 기준으로 여러 작업을 취소하는 방법
slurm

작업 이름을 기준으로 여러 작업을 취소하는 방법

내 클러스터에서 여러 작업을 실행하고 있지만 작업 ID 대신 이름을 기준으로 여러 작업을 취소하고 싶습니다. slurm 문서를 읽고 scancel -n jobname을 사용하여 취소할 수 있다는 것을 알았는데 하나씩 삭제하는 대신 일괄 삭제하고 싶습니다. slurm 작업 화면의 작업명은 다음과 같습니다. spc_2.30 spc_3.20 spc_3.10 spc_3.00 spc_2.40 spc_3.30 spc_3.20 spc_3.10 spc_2.50 spc...

Admin

Ubuntu 22.04에서 Slurm cgroups 플러그인 문제 해결
slurm

Ubuntu 22.04에서 Slurm cgroups 플러그인 문제 해결

나는 직면하고있다도전적인 질문그리고Slurm cgroups 플러그인Ubuntu 22.04를 실행하는 시스템에서. 우리는 Slurm을 비교적 처음 접했으며 복잡한 컴퓨팅 작업에서 리소스를 더 잘 관리하기 위해 Slurm을 사용하기 시작했습니다. 그러나 특히 Ubuntu 22.04 노드에서 cgroups 플러그인에 문제가 발생했습니다. 우리가 겪고 있는 상황은 다음과 같습니다. 처음에는 노드(2개는 Ubuntu 22.04를 사용하고 하나는 Ubuntu 18.04를 사용)에서 cgroups V2 플러그인...

Admin

wget — 클러스터의 여러 노드에서 여러 파일을 다운로드합니다.
slurm

wget — 클러스터의 여러 노드에서 여러 파일을 다운로드합니다.

안녕하세요. 정확히는 279개의 많은 파일을 한 번에 다운로드하려고 합니다. 각각은 BAM 크기입니다(~90GB). 제가 작업 중인 클러스터에는 여러 노드가 있으며 운 좋게도 한 번에 여러 인스턴스를 할당할 수 있습니다. 이런 상황에서 wget배치 파일(바라보다아래 예) 독립적인 실행을 위해 각 다운로드를 별도의 노드에 할당합니다. 배치파일.txt <https_link_1> -O DNK07.bam <https_link_2> -O mixe0007.bam <https_link_...

Admin

내 bash 파이프라인에서 -resume 옵션 만들기
slurm

내 bash 파이프라인에서 -resume 옵션 만들기

종속성이 있는 다양한 SLURM 작업을 제출하는 bash 파이프라인을 만들고 있습니다(설명된 대로).여기또는 아래). 작업이 충돌하는 경우 실패한 작업을 성공적으로 완료하려면 이전 작업을 모두 다시 수행해야 합니다. 실패한 작업으로 직접 돌아가는 "복구" 옵션을 만들려면 어떻게 해야 합니까? job1=$(sbatch ...) # no dependency job2=$(sbatch --dependency=afterany:$job1 ...) # dependent on job1 success - PD me...

Admin

Bash 스크립트 - N 프로세스가 항상 slurm에서 시작되는지 확인
slurm

Bash 스크립트 - N 프로세스가 항상 slurm에서 시작되는지 확인

일 이 명령을 사용하여 원격 시스템에서 시작된 M개 작업/명령 목록에서 srun모든 M개 작업이 시작될 때까지 항상 N개 작업이 실행 중이거나 요청되어 있는지(N<=M) 확인하세요. 동기 부여 (다른 제안으로 이어질 수 있으므로 포함됨) 저는 현재 2단계 프로세스를 통해 수행하고 있는 일련의 시뮬레이션을 실행해야 합니다. 두 단계 모두 MSTR_FILE시뮬레이션에 대한 기본 정보를 포함하는 것을 기반으로 합니다 . 1단계: 다음 내용을 기반으로 MSTR_FILE시뮬레이션에 필요한 디렉터리 및 ...

Admin

Linux의 프로세스에 적용된 모든 cgroup을 쿼리하기 위한 API
slurm

Linux의 프로세스에 적용된 모든 cgroup을 쿼리하기 위한 API

저는 자체 최대 액세스 가능 메모리를 알아야 하는 일부 소프트웨어를 개발 중입니다. Linux에서는 cgroup에 따라 다릅니다. 제가 수집한 바에 따르면 프로세스는 /proc/self/cgroup현재 메모리 cgroup 중 하나를 읽어 자신의 메모리 cgroup을 결정할 수 있습니다. 그러나 실제로는 cgroup 계층 구조가 있으며 프로세스는 모든 cgroup에 의해 제한됩니다. 현재 프로세스의 모든 cgroup에 적용되는 최소 여유 메모리를 결정하는 방법은 무엇입니까? 예를 들어 Slurm을 사용...

Admin

WSL2 Ubuntu 구현에서 SLURM GRES용 Nvida 장치를 찾고 있습니다.
slurm

WSL2 Ubuntu 구현에서 SLURM GRES용 Nvida 장치를 찾고 있습니다.

뭔가 이상한 걸 시도하고 있어요. 4개의 컴퓨팅 노드로 slurm 클러스터를 구성했습니다. 그 중 2대는 WSL2를 실행하는 Windows 11 컴퓨터이며 작동하고 있습니다. 이제 SLURM 클러스터에 GPU 지원을 추가하려고 합니다. 기본 ubuntu 22.04 시스템에 있는 2개의 컴퓨팅 노드의 경우 nvidia 장치는 /dev/nvidia[0-3]으로 표시되지만 WSL2(Ubuntu 22.04)에서는 /dev/에 GPU와 통신할 항목이 없습니다. 두 컴퓨터의 하드웨어는 다르지만 둘 다 Windo...

Admin

Slurm은 QoS 제한을 유지하지 않습니다.
slurm

Slurm은 QoS 제한을 유지하지 않습니다.

클러스터에 QoS 제한을 설정하려고 합니다. 특히 누구도 특정 파티션에 작업을 제출할 수 없도록 하고 싶습니다. 그래서 파티션에서 CPU 제한을 활성화했는데 예상대로 작동했지만 Slurm을 다시 시작한 후 제한이 유지되지 않는 것을 발견했습니다. 이것이 정상입니까? $/opt/slurm/bin/scontrol update PartitionName=login-queue QoS=login-node $scontrol show partition login-queue PartitionName=login-que...

Admin

slurm을 사용하여 pcluster의 컴퓨팅 노드에서 SSH 키 변경
slurm

slurm을 사용하여 pcluster의 컴퓨팅 노드에서 SSH 키 변경

로그인 노드는 현재 컴퓨팅 노드 중 하나이며 별도의 대기열에 있습니다. 이 로그인 노드에 대해 /etc/ssh에 사용자 정의 SSH 키를 설정하려고 합니다. 설치 후 스크립트에 사용자 정의 SSH 키를 도입하려고 시도했지만 어떤 이유로 슬럼이 작동을 멈췄습니다. 작업을 제출하려고 하면 다음과 같이 표시됩니다. sbatch: error: Batch job submission failed: Invalid account or account/partition combination specified. syst...

Admin