2015-05-19 35 views
0

我們正在運行一個EC2集羣(6x m1.xlarge)與火花1.1.0,並且一切工作正常,昨天我推出了一個新的集羣(相同的規格),但火花1.3.1 我遇到eventLog.enabled的真實屬性 遇到與https://issues.apache.org/jira/browse/SPARK-6950中相同的行爲。即使作業已經完成,webUI歷史記錄也無法構建它們並將它們顯示爲正在進行中。我檢查了* .inprogress文件仍然存在。 我讀過JIRA中的錯誤報告,它說6950在1.3.1中修復了,但是我每次運行的工作都會收到這個錯誤,並且我看到了一個來自其他人的評論(6天前)。有任何想法嗎?問題與火花大師webUI和事件日誌

+0

打到https://issues.apache.org/jira/browse/SPARK-6107。也許。 SPARK-6950被標記爲不可複製 – banjara

+0

6950它與6107不一樣,在6107中它們表示它應該在1.4.0中修復,但它是關於6950(以及我遇到的問題)中的手動停止作業我運行的每一項工作,無論它是停止還是成功完成都無所謂 – sebamontini

回答

1

發生在我身上的火花1.3.1