將Hadoop塊大小更改爲低於最小塊大小

如何更改Hadoop塊大小低於默認最小塊大小的值。將Hadoop塊大小更改爲低於最小塊大小

本手冊頁（https://hadoop.apache.org/docs/r2.6.0/hadoop-project-dist/hadoop-hdfs/hdfs-default.xml）表示默認最小塊大小或dfs.namenode.fs-limits.min-block-size設置爲1048576（1 MB）。但是，當我將其更改爲低於該值的任何值時（例如100 KB），在hdfs-site.xml中，同時我將dfs.blocksize更改爲200 KB（仍然大於修改的最小塊大小），仍然會得到錯誤說dfs.blocksize不能低於最小塊大小1048576.

此外，我使用Hadoop 2.7.1，以防萬一。

來源

2016-03-29 IFH

您應該在hdfs-site.xml中添加屬性，而不是hdfs-default.xml。添加屬性並重新啓動namenode並重試。

來源

2016-03-30 06:07:55

我的不好，我的意思是說我在hdfs-site.xml上試過，而不是hdfs-default.xml。 – IFH

您是否嘗試重新啓動hadoop服務，然後運行您的工作？ –

我試過重新啓動服務，它仍然說dfs.blocksize <1048576.即使我將最小塊大小設置爲100 KB。 – IFH

將Hadoop塊大小更改爲低於最小塊大小

回答

相關問題