多个Java webapps对Linux

时间:2016-07-12 15:27:57

标签: java linux multithreading jvm out-of-memory

最近我发现" java.lang.OutOfMemoryError:无法创建新的本机线程"当两个独立Java Web应用程序的线程总数达到 1024 时,它们在同一台机器上。

我用来显示进程的线程数的命令是:ps huH p $pid | wc -l

[root@vm119 ~]# ps huH p 11294 | wc -l
378
[root@vm119 ~]# ps huH p 11052 | wc -l
646

在我的案例中,java webapps实际上是从同一个jar文件的两个副本中衍生出来的Java守护进程。

在此实例时,vmstat显示仍有大量空闲RAM。我还启动了另一个java代码(继续创建新线程,直到它获得OutOfMemoryError并打印出它创建的线程总数),以查看它可以创建多少个线程。 预计它仍然可以创建31051个线程。这意味着操作系统仍然拥有当时创建本机线程所需的本机资源。

两个Java Web应用程序都使用以下JVM选项启动:-Xmx4096m -Xms512m -Xss256k

机器上的ulimit -a

[root@vm119 ~]# ulimit -a
core file size          (blocks, -c) 0
data seg size           (kbytes, -d) unlimited
scheduling priority             (-e) 0
file size               (blocks, -f) unlimited
pending signals                 (-i) 62810
max locked memory       (kbytes, -l) 64
max memory size         (kbytes, -m) unlimited
open files                      (-n) 100000
pipe size            (512 bytes, -p) 8
POSIX message queues     (bytes, -q) 819200
real-time priority              (-r) 0
stack size              (kbytes, -s) 10240
cpu time               (seconds, -t) unlimited
max user processes              (-u) 62810
virtual memory          (kbytes, -v) unlimited
file locks                      (-x) unlimited

我研究并遵循" java.lang.OutOfMemoryError的正常调查例程:无法创建新的本机线程"问题,但实际上找不到任何有用的东西。

这两个webapps的1024个线程总数似乎非常可疑......他们加起来是偶然的意外吗?或者我错过了操作系统或JVM的一些限制?

1 个答案:

答案 0 :(得分:4)

在Aris2World和lenach87的帮助下,我设法找到了自己问题的答案。

它的根本原因是Linux对进程的执行用户的最大用户进程(NPROC)限制。

我在调查期间以root身份登录,因此结果ulimit -a用于root:

[root@vm119 ~]# ulimit -a
core file size          (blocks, -c) 0
data seg size           (kbytes, -d) unlimited
scheduling priority             (-e) 0
file size               (blocks, -f) unlimited
pending signals                 (-i) 62810
max locked memory       (kbytes, -l) 64
max memory size         (kbytes, -m) unlimited
open files                      (-n) 100000
pipe size            (512 bytes, -p) 8
POSIX message queues     (bytes, -q) 819200
real-time priority              (-r) 0
stack size              (kbytes, -s) 10240
cpu time               (seconds, -t) unlimited
max user processes              (-u) 62810
virtual memory          (kbytes, -v) unlimited
file locks                      (-x) unlimited

但是,我应该检查的是webapps执行用户的限制:

[root@vm119 ~]# su - user -c "ulimit -a"
core file size          (blocks, -c) 0
data seg size           (kbytes, -d) unlimited
scheduling priority             (-e) 0
file size               (blocks, -f) unlimited
pending signals                 (-i) 62810
max locked memory       (kbytes, -l) 64
max memory size         (kbytes, -m) unlimited
open files                      (-n) 100000
pipe size            (512 bytes, -p) 8
POSIX message queues     (bytes, -q) 819200
real-time priority              (-r) 0
stack size              (kbytes, -s) 10240
cpu time               (seconds, -t) unlimited
max user processes              (-u) 1024
virtual memory          (kbytes, -v) unlimited
file locks                      (-x) unlimited

为了更改执行用户的限制,我手动插入两行

  

/etc/security/limits.conf文件

[root@vm119 ~]# cat /etc/security/limits.conf | grep user
user            soft    nproc   4096
user            hard    nproc   4096