如何爲SPARK_HOME變量設置爲SPARK INSTALLATION？

Question

遵循鏈接http://h2o-release.s3.amazonaws.com/sparkling-water/rel-2.2/0/index.html的蘇打水步驟。

運行在終端：

〜/ InstallFile/SparklingWater /波光粼粼的水-2.2.0 $斌/波光粼粼的殼--conf 「spark.executor.memory = 1G」 也

請設置SPARK_HOME變量到您的Spark安裝，如何解決這個問題。

Answer 1

您應該安裝並設置SPARK_HOME變量，在UNIX終端運行下面​​的代碼來設置變量：

export SPARK_HOME="/path/to/spark" 

安裝https://www.tutorialspoint.com/apache_spark/apache_spark_installation.htm

Answer 2

看到這個你必須下載火花運行上想要使用蘇打水的機器。它可以是本地下載，也可以是Hadoop上的羣集火花。

SPARK_HOME變量是波光粼粼的水將找到火花運行時間的目錄/文件夾。

在下面設置SPARK_HOME，我有星火2.1下載本地機器上，並設置路徑如下解壓後的火花2.1：

SPARK_HOME=/Users/avkashchauhan/tools/spark-2.1.0-bin-hadoop2.6 

$ pwd 
/Users/avkashchauhan/tools/sw2/sparkling-water-2.1.14 

現在，當我啓動波光粼粼的殼如下正常工作：

~/tools/sw2/sparkling-water-2.1.14 $ bin/sparkling-shell                                               

----- 
    Spark master (MASTER)  : local[*] 
    Spark home (SPARK_HOME) : /Users/avkashchauhan/tools/spark-2.1.0-bin-hadoop2.6 
    H2O build version   : 3.14.0.2 (weierstrass) 
    Spark build version  : 2.1.1 
    Scala version    : 2.11 
----