2014-12-07 139 views
0

我使用8節點hadoop集羣和namenode內存使用情況顯示爲7%。我覺得這個集羣將達到namenode內存的最大限制。Hadoop集羣中的最大數據節點數量是多少?

當前羣集存儲大小爲5.6TB,namenode堆大小爲4GB。其他塊大小爲128MB。

計算Hadoop集羣(具有單個名稱節點)的最大數據節點數量的方式是什麼?

回答

1

Namenode內存使用量與塊的數量成正比也是指南是100萬塊需要1 GB內存......並且對於我的5.6 TB和128 MB塊大小,我計算出您可以擁有大約50萬個塊複製(您可以重新計算)。所以,我的結論是你有足夠的內存,除非有很多小文件...

相關問題