HDFS块大小选择

时间:2018-01-25 05:15:04

标签: hadoop mapreduce hdfs distributed-computing

3台机器(1台主机),44 MB文件。

  1. 如果HDFS块大小= 32 MB,则文件将分为两个块:32 MB和12 MB。
  2. 这是否意味着一个slave可以处理32 MB而另一个可以并行处理12 MB?

    1. 如果HDFS块大小= 16 MB,则文件将分为三个块:16 MB,16 MB和12 MB。
    2. 这是否意味着一个slave可以处理16 MB,另一个可以处理另外16 MB并且它们同时完成,那么,其中一个将处理12 MB? 因此,这会使这个块大小选择更好吗?

0 个答案:

没有答案