羣集中的不同數據節點可能具有不同的存儲容量？

Question

可以將不同容量的節點添加到我們的Hadoop集羣。

實施例：

Data Node 1 - 1 TB Disk space, 20 GB memory 
Data Node 2 - 5 TB Disk space, 30 GB memory 
Data Node 3 - 60 TB Disk space, 50 GB Memory. 

Answer 1

這是可能的。但爲此，您需要不同大小的物理硬盤。

您無法定義使用conf中數據節點的硬盤大小。文件。因此，如果您希望磁盤空間大小不同以便在數據節點中使用，則可以通過安裝不同容量的硬盤來實現此目的。

但是，對於所有數據節點而言，塊大小將保持相同，因爲塊大小是針對整個羣集定義的，而不是針對單個節點定義的。