驅動程序命令關閉後，Spark工作站停止工作

Question

基本上，主節點也作爲從站執行。一旦主設備上的從設備完成，它將調用SparkContext停止，因此該命令會傳播到所有在處理過程中停止執行的從設備。

錯誤日誌中的工人之一：

INFO SparkHadoopMapRedUtil：attempt_201612061001_0008_m_000005_18112：承諾

INFO執行人：在階段8.0成品任務5.0（TID 18112）。 2536個字節結果發送到駕駛員

信息CoarseGrainedExecutorBackend：驅動命令關閉

錯誤CoarseGrainedExecutorBackend：接收信號TERMtdown

Answer 1

檢查你的資源管理器的用戶界面，如果你看到任何執行失敗 - 它詳細介紹關於內存錯誤。但是，如果執行程序沒有失敗，但驅動程序仍然要求關閉 - 通常這是由於驅動程序內存造成的，請嘗試增加驅動程序內存。讓我知道事情的後續。