2016-04-03 50 views
1

我已創建Spark HDInsight羣集Azure。該集羣用於運​​行不同的作業(Spark或Hive)。HDInsight Azure上的SparkHistory不顯示任何應用程序

直到一個月前,作業的歷史可以在Spark歷史服務器儀表板中看到。看來引入了Spark 1.6.0的更新後,該儀表板不再顯示任何應用程序。

我也試圖繞過這個問題,通過執行PowerShell cmdlet爲get-azurehdinsightjob作爲請求here。輸出又是一個空的應用程序列表。

我會很感激任何幫助,因爲這個儀表板用於工作,現在我所有的實驗都停滯了。

+0

檢查您的應用程序或外殼是否連接到正確的主設備。 – eliasah

+0

是的,外殼已正確連接。 –

回答

0

我設法解決問題刪除裏面的一切wasb:/// hdp/spark-events。也許這個問題與文件夾的大小有關,因爲沒有其他日誌文件可以被追加。

以下所有作業現在都成功出現在Spark History Server儀表板中。

相關問題