EMR AWS增加了映射器的数量

时间:2017-07-04 10:55:24

标签: amazon-web-services mapreduce emr

我在AWS上执行mapreduce程序,代码运行正常。 我的问题是并行工作的地图功能的数量。 每次执行程序时,只有一个map函数,只有一个节点并行工作。

我的输入文件包含100行,大小为4 kB。我需要为每个并行运行的20行创建一个map函数。

我尝试在配置中更改“fs.s3n.block.size”参数但尚未更改。

谢谢。

0 个答案:

没有答案