需要幫助安裝hadoop

我是Hadoop的新手，並嘗試使用cygwin將其安裝在我的Windows 7（x64）PC上。我跟着這個教程安裝http://alans.se/blog/2010/hadoop-hbase-cygwin-windows-7-x64/#software 需要幫助安裝hadoop

這一切步驟之前去正確的 -

Only Hadoop 0.21.0: Next, one line has to be added to the hadoop-config.sh file in hadoop-0.21.-0/bin 

    CLASSPATH=`cygpath -wp "$CLASSPATH"` 

Add this line before the line containing 

    JAVA_LIBRARY_PATH=''

該訂單 CLASSPATH = cygpath -wp "$CLASSPATH"需要被複制，因爲它是什麼？

因爲我試圖運行下面的命令。

$ bin/hadoop namenode -format

我cygwin的版本得到這樣的錯誤

/usr/local/hadoop-0.21.0/bin/hadoop-config.sh: line 15: $'\r': command not found 
/usr/local/hadoop-0.21.0/bin/hadoop-config.sh: line 19: $'\r': command not found 
/usr/local/hadoop-0.21.0/bin/hadoop-config.sh: line 21: $'\r': command not found 
/usr/local/hadoop-0.21.0/bin/hadoop-config.sh: line 75: syntax error near unexpected token `$'in\r'' 
'usr/local/hadoop-0.21.0/bin/hadoop-config.sh: line 75: `case "`uname`" in 
DEPRECATED: Use of this script to execute hdfs command is deprecated. 
Instead use the hdfs command for it. 

HDFS not found.

任何人都可以解釋什麼錯誤？

來源

2012-02-06 Nilesh Barai

你嘗試使用推薦的命令？你的'$ CLASSPATH'是什麼？ – 2012-02-06 18:44:44

@DaveNewton：教程中提到了類似這樣的內容...... 原因是爲了使用所有Hadoop罐（line〜120〜〜200）構建CLASSPATH，路徑需要位於Cygwin格式（/ cygdrive/c/cygwin/usr/local/hadoop ...），但是爲了讓Java使用類路徑，它需要使用Windows格式（c：\ cygwin \ usr \ local \ hadoop ..）。該行將Cygwin構建的類路徑轉換爲Windows可以理解的類路徑。這是什麼意思？ – 2012-02-07 06:08:13

您正在使用不建議使用的命令。有關hadoop命令的列表，請在控制檯上輸入hadoop。我認爲該命令是Hadoop的NameNode的-format

來源

2012-02-06 20:49:58 RFT

呃...這是OP運行的命令。 – 2012-02-06 21:18:26

@DaveNewton：那是我困惑的地方...這段代碼中的CLSSPATH = cygpath -wp「$ CLASSPATH」我應該在Windows中通過替換$ CLASSPATH和cygwin中的hadoop路徑來替代cygpath來寫入hadoop文件夾的路徑？ – 2012-02-07 05:54:47

@sid：我正在使用您提到的相同命令 – 2012-02-07 05:59:46

我用的cygwin 1.7也得到了這些錯誤：

/usr/local/hadoop-0.21.0/bin/hadoop-config.sh：第15行： $'\ r'：命令找不到

看來這些文件不是以DOS CR/LF格式而不是預期的UNIX格式。

您可以用Notepad ++之類的文本編輯器來確認。在窗口的右下角，可以說Dos \ Windows（很可能你會看到）或者UNIX。

要解決這些錯誤，在cygwin窗口中，我根據需要在bin文件夾和其他文件夾（conf等）中使用了命令dos2unix * .sh。

希望這可以幫助你！

來源

2012-03-18 01:40:26 dplante

使用dos2unix 文件名（shell命令）將d build中需要的config.sh文件或任何配置文件轉換爲unix格式。看起來文件默認更改爲DOS格式。使用（dos2unix ./*）shell命令更好地將d文件夾中的每個文件轉換爲unix。

來源

2013-08-03 05:53:46 user1978601

Cygwin的錯誤似乎與npm腳本已知的錯誤。你可以用在這裏提到的工作，

https://stackoverflow.com/a/22436199/2390020

來源

2014-03-21 00:31:52 Tharaka

需要幫助安裝hadoop

回答

相關問題