4.3 커널을 사용한 스레드 생성이 "리소스를 일시적으로 사용할 수 없음"으로 인해 실패합니다.

저는 Arch Linux(커널 4.3.3-2)에서 여러 컨테이너가 있는 Docker 서버를 실행하고 있습니다. 마지막 재부팅 이후, 도커 서버와 컨테이너 모두의 임의 프로그램이 스레드를 생성할 수 없거나 (흔하지 않지만) 분기된다는 메시지와 함께 충돌했습니다. 구체적인 오류 메시지는 프로그램에 따라 다르지만 대부분 특정 오류를 언급하는 것 같습니다 Resource temporarily unavailable. 이 문서 끝부분에 있는 몇 가지 오류 메시지 예를 참조하세요.

이제 많은 사람들이 이 오류 메시지를 받았고, 많은 사람들이 이에 응답했습니다. 정말 답답한 점은 모두가 이 문제를 어떻게 해결할지 추측하고 있는 것 같은데, 누구도 그 방법을 지적하지 않는 것 같다는 것입니다.확인하다문제의 가능한 원인은 무엇입니까?

오류의 5가지 가능한 원인과 해당 오류가 내 시스템에서 발생하는지 확인하는 방법을 수집했습니다.

1. /proc/sys/kernel/threads-max(원천). 제 경우에는 로 설정되어 있습니다 60613.
2. 각 스레드는 스택에서 일부 공간을 차지합니다. 스택 크기 제한은 ulimit -s(원천). 예전에는 쉘의 한계가 있었는데 8192넣어서 늘려서 이제 돌아왔습니다. 나는 또한 이것을 넣어서 (* soft stack 32768/etc/security/limits.confulimit -s32768LimitSTACK=33554432/etc/systemd/system/docker.service원천, 그리고 docker 컨테이너 내부를 보고 실행하여 /proc/<pid of docker>/limits이 제한이 적용되는지 확인했습니다 .ulimit -s
3. 각 스레드에는 약간의 메모리가 필요합니다. 가상 메모리 제한은 를 사용하여 구성됩니다 ulimit -v. 내 시스템에서는 으로 설정되어 있으며 unlimited3GB 메모리 중 80%를 사용할 수 있습니다.
4. 사용되는 프로세스 수에는 제한이 있습니다 ulimit -u. 이 경우 스레드는 프로세스로 간주됩니다(원천). 내 시스템에서는 제한이 로 설정되어 있으며 30306, docker 데몬과 docker 컨테이너 내부의 제한은 입니다 1048576. 현재 실행 중인 스레드 수는 실행 ls -1d /proc/*/task/* | wc -l또는 다음을 실행하여 확인할 수 있습니다 ps -elfT | wc -l(원천). 내 시스템에서는 700와 사이에 있습니다 800.
5. 일부 계정에 따르면 열린 파일 수에 제한이 있습니다.원천s는 스레드를 생성할 때도 관련이 있습니다. 이 제한은 를 사용하여 구성됩니다 ulimit -n. 내 시스템과 내부 도커에서는 제한이 으로 설정되어 있습니다 1048576.lsof | wc -l원천), 내 시스템에서는 약 30000.

마지막 재부팅 전에는 커널 4.2.5-1을 실행 중이었는데 지금은 4.3.3-2를 실행 중인 것 같습니다. 4.2.5-1로 다운그레이드하면 모든 문제가 해결되었습니다. 이 문제를 언급하는 다른 게시물은 다음과 같습니다.이것그리고이것. 하나 열었어요아치 리눅스 버그 보고.

이 문제를 일으킬 수 있는 커널의 어떤 변화가 발생했습니까?

---

다음은 몇 가지 오류 메시지 예입니다.

Crash dump was written to: erl_crash.dump
Failed to create aux thread

 

Jan 07 14:37:25 edeltraud docker[30625]: runtime/cgo: pthread_create failed: Resource temporarily unavailable

 

dpkg: unrecoverable fatal error, aborting:
 fork failed: Resource temporarily unavailable
E: Sub-process /usr/bin/dpkg returned an error code (2)

 

test -z "/usr/include" || /usr/sbin/mkdir -p "/tmp/lib32-popt/pkg/lib32-popt/usr/include"
/bin/sh: fork: retry: Resource temporarily unavailable
 /usr/bin/install -c -m 644 popt.h '/tmp/lib32-popt/pkg/lib32-popt/usr/include'
test -z "/usr/share/man/man3" || /usr/sbin/mkdir -p "/tmp/lib32-popt/pkg/lib32-popt/usr/share/man/man3"
/bin/sh: fork: retry: Resource temporarily unavailable
/bin/sh: fork: retry: No child processes
/bin/sh: fork: retry: Resource temporarily unavailable
/bin/sh: fork: retry: No child processes
/bin/sh: fork: retry: No child processes
/bin/sh: fork: retry: Resource temporarily unavailable
/bin/sh: fork: retry: Resource temporarily unavailable
/bin/sh: fork: retry: No child processes
/bin/sh: fork: Resource temporarily unavailable
/bin/sh: fork: Resource temporarily unavailable
make[3]: *** [install-man3] Error 254

 

Jan 07 11:04:39 edeltraud docker[780]: time="2016-01-07T11:04:39.986684617+01:00" level=error msg="Error running container: [8] System error: fork/exec /proc/self/exe: resource temporarily unavailable"

 

[Wed Jan 06 23:20:33.701287 2016] [mpm_event:alert] [pid 217:tid 140325422335744] (11)Resource temporarily unavailable: apr_thread_create: unable to create worker thread