hadoop:四核机器上的map / reduce作业的最佳数量

时间:2011-10-07 19:24:25

标签: hadoop mapreduce

我试图找出谷歌,但没有找到我的好参考

- I have a Quad-core Ubuntu box running a map-reduce job.  
- running default 2 maps and taking lot of time  
- what be a good number of map/reduce job for a machine of such config?  

请建议
TIA

1 个答案:

答案 0 :(得分:3)

似乎是一个经验问题。从1开始,继续工作一段时间。绘制曲线,看看它是如何结束的。我希望你可能会找到可用内核数量或可用硬件线程数的最佳位置(在你的盒子上可能是相同的)。但是,进行实际实验是最好的方法。