如何檢查hadoop是否適合工作，

Question

我有一份工作（處理4 GB的數據），我檢查了它們都低於10％的CPU使用率和內存使用情況。

Answer 1

你的工作很可能不需要更多。您可以使用TeraSort（包含在示例jar中）來嘗試對集羣進行壓力測試，如果您的節點仍然以非常低的使用量運行，那麼可能是您的配置有問題。

Answer 2

Hadoop附帶Benchmark實用程序來驗證Hadoop集羣設置。

檢查Hadoop TestDFSIO。