2017-04-07 119 views
0

我不能發動Mesos火花的工作,當它自動啓動給出了這樣的錯誤:星火上Mesos RpcEndpointNotFoundException

"Caused by: org.apache.spark.rpc.RpcEndpointNotFoundException: Cannot find 
    endpoint: spark://[email protected]:59737" 

可能是因爲版本不匹配的?如果我發佈一個帶有分發功能的例子,那就完美了。

謝謝

+0

你如何'spark-submit'? –

+0

./bin/spark-submit --class Main --master mesos://spark-mesos-dispatcher.marathon.mesos:7077 --deploy-mode cluster /home/ggallo/Frequency-assembly-1.0.jar – Gorka

+0

You確定它是'mesos://spark-mesos-dispatcher.marathon.mesos:7077'?它應該是'mesos://spark-mesos-dispatcher.marathon.mesos:5050',不應該嗎?但是,那麼你會遇到另一個錯誤消息。 –

回答

0

現在工作。這是應用程序錯誤,我沒有正確地把一個數據輸入路徑。

在mesos中,您有兩種部署選項,即集羣模式或客戶端模式。我選擇了集羣模式,並且我有一個始終監聽spark工作的spark守護進程(MesosClusterDispatcher),這就是爲什麼我使用mesos://spark-mesos-dispatcher.marathon.mesos:7077

謝謝Jacek!