如何在Windows上配置Apache Spark？

Question

我想在我的Windows機器上安裝Apache Spark。是否有Windows需要遵循的具體步驟？

Answer 1

1. 下載spark-1.6.0-bin-hadoop2.6.tgz從the Spark website並打開它，用7zip的例如。

2. 將其解壓到一個文件夾中，例如放到C：\ sparktest中。所以我現在的結構是C：\ SparkTest \火花1.6.0彬hadoop2.6 \

3. 我們下載hadoop2.6.0對於Windows： https://www.barik.net/archive/2015/01/19/172716/

4. 我們在其他地方提取出來。

5. 在Spark基礎文件夾中，我們進入conf文件夾，在該文件夾中應找到名爲log4j.properties.template的文件。 我們刪除模板部分，所以名稱應該是log4j.properties。對於我們自己的理智，我們可以打開文件，更改從INFOrootCategory到WARN

6. 星火bin文件夾添加到您的系統的PATH環境變量。

7. 我們創建一個環境變量SPARK_HOME我們切換到星火基本文件夾（spark-1.6.0-bin-hadoop2.6）

8. 我們創造，我們設置爲我們提取的Hadoop基礎文件夾

這就是HADOOP_HOME環境變量全部

後來你必須學習sbt和scala。