1
我是Hadoop的新手。我試圖搭建hadoop集羣來測試hadoop的性能。我想知道什麼是最小集羣大小，內存，磁盤空間，數量核心，爲每個節點（主從），我想知道什麼是測試文件的大小。我想處理文本文件hadoop集羣測試的最低要求是什麼
A
回答
1
對於HortonWorks
- 運行在32位和64位操作系統（Windows 7，Windows 8和Mac OSX和Linux）
- 你的機器應該有一個最低10 GB到能夠運行其分配8GB VM的
虛擬化BIOS上啓用只有當你運行它在虛擬機上- 瀏覽器：Chrome瀏覽器25+，IE 9，Safari 6以上版本，火狐18 +推薦。 （沙盒將無法在IE 10上運行）
只要到他們的下載頁面http://hortonworks.com/hdp/downloads/
看Cloudera的要求，你會得到這個
- RAM - 4 GB
- 必須禁用IPv6。
- 沒有被iptables或防火牆阻止;端口7180必須打開，因爲它在安裝後用於訪問Cloudera Manager。 Cloudera Manager使用必須打開的特定端口進行通信。
- ext3：這是經過測試的HDFS底層文件系統。
- CPU - 多多益善
- JDK 1.7至少
欲瞭解更多信息，您可以查看以下鏈接
+0
我使用Hortonworks，提供基於Apache Hadoop的開源平臺，用於分析，存儲和管理大數據。 –
相關問題
- 1. neo4j的最低要求是什麼？
- 2. 什麼是NServiceBus 3.0最低要求
- 3. 運行Tomcat + Mysql需要的最低系統要求是什麼
- 4. 什麼是最好的node.js集羣？
- 5. 什麼是Windows Server 2003上的.NET Framework 4.0的最低要求
- 6. 什麼文件觸發Hadoop集羣
- 7. 運行RestComm的最低要求是什麼？
- 8. 獲取Facebook使用故事的最低要求是什麼？
- 9. Wp 7仿真器的最低顯卡要求是什麼？
- 10. 什麼是使用離子的絕對最低要求？
- 11. 運行java類文件的最低要求是什麼？
- 12. Sybase ASE 15.7的最低要求是什麼？
- 13. 什麼是最低要求的環境變量？
- 14. CKeditor上傳圖片的最低要求是什麼？
- 15. 爲MQSeries編寫Java客戶端的最低要求是什麼？
- 16. hadoop基準測試的最佳做法是什麼？
- 17. 什麼是AngularJS單元測試的最低安裝套件？
- 18. Android架構組件liveData和room--最低要求是什麼？
- 19. 當次要名稱節點失敗時，對hadoop羣集的影響是什麼
- 20. inlineformset_factory最低要求
- 21. 爲Hadoop集羣
- 22. Hadoop集羣需求軟件/硬件
- 23. JSUnit測試的公共測試羣集？
- 24. 什麼是RabbitMQ集羣？
- 25. JavaFX的最低要求
- 26. Corona SDK的最低要求
- 27. 多節點Hadoop集羣中的HDFS壓力測試
- 28. 要讓NUnit測試與Visual Studio常規構建集成，最低要求是多少？
- 29. Hadoop集羣與碼頭羣
- 30. 如何在測試廚房裏的廚師使用羣集節點，我需要與廚師與測試廚房安裝Hadoop集羣測試
這取決於你將使用什麼類型的數據和操作。 –
我正在嘗試處理文本文件 –
您可以在具有一個內核和大約1G內存的虛擬機上運行Hadoop。 – facha