1
我是Apache Spark的新手。目前正在使用IntelliJ IDEA 14,maven項目方法。我無法訪問Spark UI,因爲我的程序因爲本地模式下的Apache SparkUI
15/10/22 23:28:27 INFO SparkUI: Stopped Spark web UI at http://192.168.1.88:4041
SparkUI停止太快而無法檢查我的程序的功能。有什麼方法可以在停止後查看特定程序的SparkUI?或者我可以找到運行該程序後創建的某種日誌?
在將「spark.eventLog.enabled」設置爲true並將「spark.eventLog.dir」設置爲本地文件夾後,我能夠生成Unix可執行文件(local-1445955378567)。但是,日誌的細節並不是我所期望的。我如何添加SparkListener?
Output of unix executable"local-1445955378567"