0
我在我的集羣上安裝了zeppelin 0.6.0,它具有spark 1.4.1(HDP 2.3)。根據release notes我看到它支持spark 1.6,但不確定它是否向後兼容。 當我嘗試在筆記本運行sc.version,我可以看到火花作業紗線提交,但它未能與在應用以下錯誤馬上登錄Error: Could not find or load main class org.apache.spark.deploy.yarn.ExecutorLauncher
zeppelin 0.6.0將與Spark 1.4.1一起使用嗎?
我SPARK_HOME路徑是正確的。因此針對不兼容性問題進行調整
export MASTER=yarn-client
export SPARK_YARN_JAR=/usr/hdp/current/spark-client/lib/spark-assembly-1.4.1.2.3.2.0-2950-hadoop2.7.1.2.3.2.0-2950.jar
export SPARK_HOME=/usr/hdp/current/spark-client