标签: amazon-web-services mapreduce emr
我在AWS上执行mapreduce程序,代码运行正常。 我的问题是并行工作的地图功能的数量。 每次执行程序时,只有一个map函数,只有一个节点并行工作。
我的输入文件包含100行,大小为4 kB。我需要为每个并行运行的20行创建一个map函数。
我尝试在配置中更改“fs.s3n.block.size”参数但尚未更改。
谢谢。