Hadoop中的動態節點

Question

Hadoop啓動後是否可以向Hadoop添加新節點？我知道你可以刪除節點（因爲主人傾向於保持節點狀態的標籤）。

Answer 1

您可以通過使用正確的hadoop-site.xml（一個指向主名稱節點和jobtracker）引導新節點來添加新節點。

也就是說，如果不重新平衡您的hdfs文件塊以防止移除給定塊的所有模糊，則刪除節點是一個非常糟糕的主意。

如果刪除三個datanode，則可能會丟失給定塊（複製爲3，默認值）的所有模糊，從而破壞塊所屬的文件。刪除兩個節點可能會留下一個副本，並且可能已損壞（已知會發生在死磁盤中）。

Answer 2

我認爲只要你不使用它們作爲datanode，你就不會有問題......當然，hadoop的數據局部性方面已經消失了。