使用紗線集羣

提交作業在星火我不能提交作業紗cluster.The作業下yarn-client選項罰款運行。當提交到yarn-cluster時，只有這個日誌多次出現。使用紗線集羣

Application report for application_1421828570504_0002 (state: ACCEPTED)

並因以下例外而失敗。

diagnostics: Application application_1421828570504_0002 failed 10 times due to AM Container for app 
attempt_1421828570504_0002_000010 exited with exitCode: 1 due to: Exception from container-launch: org.apache.hadoop.util.Shell$ExitCodeException: 
org.apache.hadoop.util.Shell$ExitCodeException:

來源

2015-01-21 Rahul

歡迎光臨！據我所知，例外是告訴你，退出代碼非零退出。除非你幸運，有人想出了一個很好的猜測，否則我認爲你需要看看日誌，並找出失敗的原因並希望_why_。 – 2015-01-21 20:50:27

你應該看看你的應用程序的日誌：

> yarn logs --applicationId application_1421828570504_0002

這將產生火花集裝箱內實際運行的一些調試信息。由於它在本地運行，但不在集羣上，我的猜測是缺少SparkContext定義。看看我的answer to this question的修復。

來源

2015-11-26 10:31:56

使用紗線集羣

回答

相關問題