2015-04-29 42 views
-1

我最近遇到了Storm實時分析項目。我想知道如何集成Hadoop和Storm來處理數據。另外,我需要爲使用兩者結合的各種項目提供建議。 謝謝....如何整合hadoop和風暴?

回答

0

所以風暴有Bolt的概念&噴口。

當噴口將數據輸入系統時,螺栓進行處理。

Storm提供了一個Storm-Hdfs連接器,通過它可以直接通過螺栓將數據寫入磁盤。

+0

那麼,使用這個連接器,我們實際上是將實時數據存儲到Hdfs中?並且這些數據是否可用於使用映射器和縮減器進行處理。總之,感謝您的幫助,我也會研究它,如果遇到任何問題,我將分享它。 – Mohit

+0

你可以給我一些關於這個連接器的資源,我可以參考嗎? – Mohit

+0

http://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.1.3/bk_user-guide/content/ch_storm-using-hdfs-connector.html – Venkat