我想學習Hadoop,是否可以在Linux機器上安裝Hadoop並嘗試大部分(如果不是全部)Hadoop實用程序?可以在Linux機器上安裝Hadoop並嘗試大部分(如果不是全部)Hadoop實用程序?
回答
是的。有可能的。
的Hadoop可以在本地兩種模式下運行:
- 獨立模式 - 沒有啓動時,你可以關閉本地文件在本地運行Hadoop作業。
- 僞分佈式模式 - 有效分佈式模式,但所有守護程序在一個節點上本地啓動。
如何設置並開始使用它們是documented on the hadoop page。
既然你說你想嘗試Hadoop實用程序,你可能想嘗試僞分佈式模式。在使用命令行工具,mapreduce作業,pig,hive等時,以僞分佈模式運行的本地羣集將看起來像是1000個節點羣集(除了它不能容納更多數據)。
您可以從cloudera下載CDH3虛擬機(https://ccp.cloudera.com/display/SUPPORT/Cloudera's+Hadoop+Demo+VM)並將所有內容集成到一個虛擬機中。恕我直言,這是從hadoop開始的最簡單的方法。
嗨大衛!你自己做過嗎?你能告訴我們你的經歷嗎? – 2012-12-07 19:03:19
我做到了,這在很多公司都很常見。這是非常順利的期限 - 你只需運行它,並有HDFS,MR,Hive,HBase工作。 – 2012-12-08 07:22:53
嗨大衛!我已經安裝了它,但是在接下來要做的事情上丟失了!你能指導我嗎? – 2012-12-10 17:16:14
- 1. Hadoop程序無需hadoop安裝編譯
- 2. hadoop中的全部命令分區器
- 3. HBase,MapReduce和HDFS可以在安裝了Hadoop並運行Hadoop的單臺機器上運行嗎?
- 4. 的Hadoop在Linux/OSX機器
- 5. 在Hadoop 2.2上安裝oozie
- 6. 在Ubuntu上安裝Hadoop
- 7. 在NFS上安裝Hadoop
- 8. 哪些是Linux特定的Hadoop內部?
- 9. Hadoop安全
- 10. Hadoop Kerberos安全
- 11. Hadoop安裝R
- 12. hadoop安裝
- 13. 安裝hadoop 2.0.0
- 14. 安裝的Hadoop
- 15. Hadoop 2.2.0安裝
- 16. Hadoop DFSClient安裝
- 17. 是否可以部分安裝.Net Framework?
- 18. Hadoop SequenceFile是否安全?
- 19. Windows上的Hadoop安裝
- 20. ubuntu12.10上的Hadoop安裝
- 21. 如何在apache hadoop上安裝cloudera 2.7.1
- 22. 如何在CentOS上安裝hive hadoop?
- 23. 如何在Hadoop 1.2.1上安裝snappy
- 24. 在單獨的機器上安裝Oozie,然後Hadoop
- 25. 在一羣機器上安裝Hadoop的結構腳本?
- 26. 將大型XML文件拆分爲Hadoop的可管理部分
- 27. 清理Datastax Enterprise Hadoop安裝的遺留部分
- 28. 調試hadoop應用程序
- 29. 簡單的香草Hadoop安裝與使用Ambari的Hadoop安裝
- 30. 我在Ubuntu機器上安裝了一個'x'用戶的Hadoop。我如何從其他用戶'Y'訪問Hadoop?
你能告訴我們你決定做什麼嗎?我在同一條船上,我想我會下載cloudera vm – 2012-12-07 19:10:15
檢查出http://openscg.com/se/bigsql/輕鬆安裝適用於Linux 64和OSX 64的Hadoop和Postgres Bundles。快速獲取教程和腳本並以僞分佈模式運行。 – CharlesG 2013-03-26 23:51:05