2017-01-18 23 views
0

我在我的集​​羣上安裝了zeppelin 0.6.0,它具有spark 1.4.1(HDP 2.3)。根據release notes我看到它支持spark 1.6,但不確定它是否向後兼容。 當我嘗試在筆記本運行sc.version,我可以看到火花作業紗線提交,但它未能與在應用以下錯誤馬上登錄Error: Could not find or load main class org.apache.spark.deploy.yarn.ExecutorLauncherzeppelin 0.6.0將與Spark 1.4.1一起使用嗎?

我SPARK_HOME路徑是正確的。因此針對不兼容性問題進行調整

export MASTER=yarn-client   
export SPARK_YARN_JAR=/usr/hdp/current/spark-client/lib/spark-assembly-1.4.1.2.3.2.0-2950-hadoop2.7.1.2.3.2.0-2950.jar 
export SPARK_HOME=/usr/hdp/current/spark-client 

回答

0

最後找到了解決方案。 Zeppelin 0.6適用於Spark 1.4.1。這是由於翻譯造成的。日誌zeppelin-zeppelin-servername.log和.out文件有助於解決此問題。我已經在火花解釋器中添加了highcharts artifact,並且無法找到該jar文件。提供正確的路徑之後,我能夠運行高圖並解決此問題。

相關問題