設置僞分佈式/單節點設置Apache Hadoop 2.2

Question

我已經將Apache Hadoop 2.2安裝爲單節點羣集。當我嘗試執行giraph示例時，最終出現錯誤「LocalJobRunner，由於一次只有一個任務，因此無法在分離的主/從模式下運行」。

我正在通過論壇，我發現我可以更新mapred-site.xml以擁有4個映射器。我嘗試過，但仍然沒有幫助。我遇到過，還有一個論壇是我可以將單節點設置更改爲僞分佈式模式，並解決了問題。

有人可以讓我知道，我需要改變哪些配置文件，以獲得單節點設置行爲爲僞分佈式模式。

Answer 1

添加到renZzz答案，你還需要檢查，如果你可以ssh到本地主機沒有密碼：

$ ssh localhost 

如果您無法通過SSH到本地主機沒有密碼，請執行以下命令：

$ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa 
$ cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys 

以下鏈接可以幫助你 - https://hadoop.apache.org/docs/current2/hadoop-project-dist/hadoop-common/SingleNodeSetup.html

Answer 2

我的第一個設置，我跟着一些手冊，但肯定最好的一個單點點頭e設置，是pdf Apache Hadoop YARN_sample。我建議您一步一步地使用本手冊

Answer 3

首先，確保工作人員的數量是一個。然後，你需要配置Giraph不通過拆分和工人師傅：

giraph.SplitMasterWorker=false 

你可以將它設置在giraph-site.xml中或通過命令行 傳遞選項：

-ca giraph.SplitMasterWorker=false 

參考： https://www.mail-archive.com/user@giraph.apache.org/msg01631.html