2
我正在運行hadoop,並且在羣集中有2個相同配置的服務器。他們運行相同的任務,相同的配置,相同的任務,並且都是完全專用的hadoop任務節點(工作人員)。具有完全相同的工作負載,一臺服務器顯示高cpu負載
我通過此羣集運行的作業具有很高的IO限制。
在一臺服務器我看到的IO
60-100MB/sec
和5-10
一個CPU load
,在其他服務器上我看到的IO
40-60MB/sec
和CPU load of 60-90
(和盒子中運行,甚至一個簡單的shell而言幾乎無法使用)。
我運行了smartctl
並沒有得到任何磁盤警告。
什麼我接下來會做鑑定這些盒子之間的差別根源任何suggestsions?這些結果在很多小時的處理過程中一直保持一致。
看一下iostat的輸出,它會幫助你弄清楚這是否是由特定的磁盤引起的。 – n3rV3 2013-05-13 12:35:54