似乎OSX在线程方面有一些限制,请查看:http://support.apple.com/kb/HT3854。
我一直在尝试使用ruby和一个负责根据需要打开尽可能多的TCP线程的系统。为了在ruby中重现问题,我使用了以下代码:
10000.times { |n| p n; Thread.new { sleep 60 } }
当我运行上面的代码时,我在打印出大约2022个线程后不断收到此错误:
ThreadError: unable to create new native thread
initialize at org/jruby/RubyThread.java:382
new at org/jruby/RubyThread.java:301
(root) at main.rb:1
times at org/jruby/RubyFixnum.java:273
(root) at main.rb:1
这是Jruby的实现,但它对所有其他实现都是一样的,实际上它与ruby本身没有关系,就像你对cpp做同样的事情你会遇到同样的问题:
#include <pthread.h>
#include <stdio.h>
#include <ulimit.h>
void thread_main(void *ptr)
{
sleep(60);
}
int main()
{
int i;
pthread_t threads[10000];
for(i = 0; i < 10000; i++) {
printf("%d\n", i);
if(pthread_create(threads + i, NULL, (void *)thread_main, NULL) != 0) {
perror("thread test");
exit(1);
}
}
}
无论如何最大化线程数以使用那里的所有资源?
答案 0 :(得分:3)
无论如何最大化线程数以使用那里的所有资源吗?
更改您的设计。 10000个物理线程只是浪费资源 - 它将消耗大量内存并花费(几乎)所有时间上下文切换。
将程序限制为16个线程(作为起点)并以不同方式处理问题。你的程序将以这种方式获得更多的CPU时间(读取:它将比使用1000+线程快许多倍)。在问题上投入更多线程(如OP中所示)只会使您的系统变慢(如果它是为了兑现您的请求 - 请参阅并行减速)。
另请参阅OS X的“Thread Costs”。