0
我運行一個僞分佈式Hadoop的安裝簡單ItemSimilarityJob象夫的工作,被殺害,只有消息一段時間後停止進程:亨利馬烏打死錯誤
12/06/05 21:04:52 INFO mapred.JobClient: map 33% reduce 8%
12/06/05 21:05:18 INFO mapred.JobClient: map 36% reduce 8%
12/06/05 21:05:30 INFO mapred.JobClient: map 39% reduce 8%
Killed
任何人有任何想法,爲什麼這會發生?我有幾次跑步,這一直髮生,但在不同的階段。
已解決:如果我的電腦開始休眠它會殺死所有HADOOP作業。
感謝, 伊利亞·
射中黑暗:內存不足?你可以發佈任務日誌嗎? –
您可以將slowstart屬性設置爲1.0以幫助診斷問題出在哪裏(映射或減少方面) - 但正如@ThomasJungblut所說,日誌是最好的地方 - 發佈Reducer任務映射器的日誌內容失敗的統計數據(不是死亡狀態) - 您應該能夠在作業跟蹤器Web UI頁面找到這些信息以供您找工作 –
他們相當長?我應該看一些特定的部分嗎?我應該期待看看是否有內存問題? 奇怪的是,工作跟蹤器說所有的工作都是成功的?! – ilijaluve