的Map Reduce工作中的Apache Hadoop的2.0

Question

我下面Michael Noll教程建立多節點集羣和運行樣品的MapReduce程序。我正在設置Hadoop版本2.2.0。 Hadoop 2.2.0中沒有contrib目錄。我使用當前目錄中的find命令搜索jar。 搜索結果

我的問題是如何運行Hadoop中多節點集羣環境映射縮減計劃？多節點集羣上

Answer 1

運行的MapReduce程序是相同單個節點。在鏈接：Learnig hadoop中給出了運行0.23及更高版本（甚至是2.2.0）的示例mapreduce程序的步驟。 這裏給出Wordcount程序。即使ü可以用相同的罐子

Answer 2

我們有4個節點的Hadoop-2.2.0集羣中運行PI-估計。

能夠通過從Hadoop的根文件夾（在本例中的/ usr /本地/ hadoop的），使用下面的運行從命令行單詞計數試驗：

hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.2.0.jar wordcount /user/ 
hduser/in /user/hduser/out 

注：

- folder name is different under hadoop: /share/hadoop/mapreduce/ 

我們建立了hduser /文件夾中（HDFS DFS -mkdir -p /用戶/ hduser/in）的，複製一個單詞計數測試文件以將其（HDFS DFS -copyFromLocal wc_test.txt /用戶/ hduser/in）和指定的輸出文件夾（不應該存在）。