Hadoop中的节点标签

时间:2017-01-09 01:17:14

标签: hadoop hdfs yarn

只是想了解节点标签如何处理HDFS。我理解使用节点标签下定义的有限节点集的纱线进行处理。如何在HDFS级别进行管理?假设我有40个节点,并为节点标签分配20个节点。

  1. 是否会将数据从一个节点复制到另一个节点进行处理?
  2. 数据是否仅驻留在节点标签下的那些节点中。
  3. 努力获取上述主题的材料。

1 个答案:

答案 0 :(得分:0)

嗯,节点标签仅用于YARN处理。数据处理可能有也可能没有本地可用的数据。在那种情况下,数据将从另一个节点流式传输。处理时间将受到影响。根据用例,标签可能有用也可能没用。