作業完成時。我可以從WebUI跟蹤作業歷史記錄,但無法從datanode(運行nodemanger服務)本地文件系統或hdfs://user/who/.staging下的日誌中找到日誌。我確認配置了$ {yarn.nodemanger.log-dirs}。找不到紗線應用日誌
是否自動刪除紗線記錄?或者有一些服務沒有運行?
作業完成時。我可以從WebUI跟蹤作業歷史記錄,但無法從datanode(運行nodemanger服務)本地文件系統或hdfs://user/who/.staging下的日誌中找到日誌。我確認配置了$ {yarn.nodemanger.log-dirs}。找不到紗線應用日誌
是否自動刪除紗線記錄?或者有一些服務沒有運行?
不,您可以使用命令yarn logs -applicationId your_application_id
檢索應用程序日誌。
日誌存儲在HDFS中。鑑於這項工作的細節如下:
的http://:/ jobhistory /工作/ job_1440796954403_13743
應用程序ID:
application_1440796954403_13743
命令來獲取日誌:
紗日誌 - applicationId application_1440796954403_13743