0
我知道工作任務頁面(在JobTracker UI中)已經顯示了mapper和reducer中每個任務的開始時間和結束時間,但我希望看到更像源機器名稱,溢出次數等等。我想我可以嘗試使用JobTracker類編寫這樣的工具?但在開始之前,我想看看是否有這樣的工具。顯示每個映射器和縮減器的完成時間和源計算機名稱細目的工具?
我知道工作任務頁面(在JobTracker UI中)已經顯示了mapper和reducer中每個任務的開始時間和結束時間,但我希望看到更像源機器名稱,溢出次數等等。我想我可以嘗試使用JobTracker類編寫這樣的工具?但在開始之前,我想看看是否有這樣的工具。顯示每個映射器和縮減器的完成時間和源計算機名稱細目的工具?
hadoop job -history all output-dir
命令是否爲您提供足夠的信息來解析/處理?
也許看着維迪,它可能會提供您正在尋找的功能 - http://hadoop.apache.org/common/docs/r1。 0.3/vaidya.html –