最近我发现" java.lang.OutOfMemoryError:无法创建新的本机线程"当两个独立Java Web应用程序的线程总数达到 1024 时,它们在同一台机器上。
我用来显示进程的线程数的命令是:ps huH p $pid | wc -l
[root@vm119 ~]# ps huH p 11294 | wc -l
378
[root@vm119 ~]# ps huH p 11052 | wc -l
646
在我的案例中,java webapps实际上是从同一个jar文件的两个副本中衍生出来的Java守护进程。
在此实例时,vmstat
显示仍有大量空闲RAM。我还启动了另一个java代码(继续创建新线程,直到它获得OutOfMemoryError并打印出它创建的线程总数),以查看它可以创建多少个线程。 预计它仍然可以创建31051个线程。这意味着操作系统仍然拥有当时创建本机线程所需的本机资源。
两个Java Web应用程序都使用以下JVM选项启动:-Xmx4096m -Xms512m -Xss256k
机器上的ulimit -a
:
[root@vm119 ~]# ulimit -a
core file size (blocks, -c) 0
data seg size (kbytes, -d) unlimited
scheduling priority (-e) 0
file size (blocks, -f) unlimited
pending signals (-i) 62810
max locked memory (kbytes, -l) 64
max memory size (kbytes, -m) unlimited
open files (-n) 100000
pipe size (512 bytes, -p) 8
POSIX message queues (bytes, -q) 819200
real-time priority (-r) 0
stack size (kbytes, -s) 10240
cpu time (seconds, -t) unlimited
max user processes (-u) 62810
virtual memory (kbytes, -v) unlimited
file locks (-x) unlimited
我研究并遵循" java.lang.OutOfMemoryError的正常调查例程:无法创建新的本机线程"问题,但实际上找不到任何有用的东西。
这两个webapps的1024个线程总数似乎非常可疑......他们加起来是偶然的意外吗?或者我错过了操作系统或JVM的一些限制?
答案 0 :(得分:4)
在Aris2World和lenach87的帮助下,我设法找到了自己问题的答案。
它的根本原因是Linux对进程的执行用户的最大用户进程(NPROC)限制。
我在调查期间以root身份登录,因此结果ulimit -a
用于root:
[root@vm119 ~]# ulimit -a
core file size (blocks, -c) 0
data seg size (kbytes, -d) unlimited
scheduling priority (-e) 0
file size (blocks, -f) unlimited
pending signals (-i) 62810
max locked memory (kbytes, -l) 64
max memory size (kbytes, -m) unlimited
open files (-n) 100000
pipe size (512 bytes, -p) 8
POSIX message queues (bytes, -q) 819200
real-time priority (-r) 0
stack size (kbytes, -s) 10240
cpu time (seconds, -t) unlimited
max user processes (-u) 62810
virtual memory (kbytes, -v) unlimited
file locks (-x) unlimited
但是,我应该检查的是webapps执行用户的限制:
[root@vm119 ~]# su - user -c "ulimit -a"
core file size (blocks, -c) 0
data seg size (kbytes, -d) unlimited
scheduling priority (-e) 0
file size (blocks, -f) unlimited
pending signals (-i) 62810
max locked memory (kbytes, -l) 64
max memory size (kbytes, -m) unlimited
open files (-n) 100000
pipe size (512 bytes, -p) 8
POSIX message queues (bytes, -q) 819200
real-time priority (-r) 0
stack size (kbytes, -s) 10240
cpu time (seconds, -t) unlimited
max user processes (-u) 1024
virtual memory (kbytes, -v) unlimited
file locks (-x) unlimited
为了更改执行用户的限制,我手动插入两行
/etc/security/limits.conf文件
[root@vm119 ~]# cat /etc/security/limits.conf | grep user
user soft nproc 4096
user hard nproc 4096