2015-06-22 41 views
0

我已經後續錯誤/警告:火花集羣:我想知道以下錯誤和可能原因的含義:

1)WARN AkkaRpcEndpointRef:錯誤發送消息[消息=心跳(2,[Lscala.Tuple2; @ 58149ee3,BlockManagerId(2,192.168.0.171,49714))]在1次嘗試 java.util.concurrent.TimeoutException:期貨後[120秒]

2)ERROR超時CoarseGrainedExecutorBackend:Driver 192.168.0.131:41837 disassociated!關機。

我在4臺機器的集羣中運行Spark(v。1.4.0)應用程序,其中驅動程序的工作內存(每GB 8 GB)的內存較少(4 GB)。由於工作量的原因,司機是否有可能產生錯誤?

+0

請參閱:http://apache-spark-user-list.1001560.n3.nabble.com/CoarseGrainedExecutorBackend-Driver-Disassociated-td9059.html –

回答

1

驅動程序無法響應執行程序,因爲它在計算過程中處於壓力之下。 問題只是通過向驅動程序添加mroe RAM來解決。