群集中的不同数据节点可能有不同的存储容量吗？

Question

可以将不同容量的节点添加到我们的Hadoop集群中。

示例：

Data Node 1 - 1 TB Disk space, 20 GB memory
Data Node 2 - 5 TB Disk space, 30 GB memory
Data Node 3 - 60 TB Disk space, 50 GB Memory. 

Answer 1

有可能。但为此你需要不同大小的物理硬盘。

您无法在conf中定义要使用数据节点的硬盘大小。文件。因此，如果您希望磁盘空间大小不同，可以在数据节点中使用，则可以通过使用不同容量的硬盘来实现此目的。

但是，对于所有数据节点，块大小将保持相同，因为为整个群集定义的块大小与单个节点的块大小相同。