我參與與2個階段的一個項目,我想知道如果這是一個大數據項目(我在這個領域的新手)這種情況是一個大數據項目嗎?
在第一個階段,我有這樣的場景:
- 我有收集數據的巨大入賬金額
- 我需要把它們存放
- 我需要建立一個Web應用程序,顯示數據給用戶
在第二p我需要分析存儲的數據並建立報告並對其進行分析
有關數據量的一些示例;在有一天我可能需要收集和存儲各地86.400.000紀錄
現在我想以這種架構:
- 到colect數據的一些異步TECNOLOGY如Active MQ和MQTT協議
- 存儲數據我一直在思考一個的NoSQL數據庫(蒙戈,HBase的或其他)
現在,這將解決我的第一個階段的問題
但第二階段呢?
我在想一些大數據SW(如hadoop或spark)和一些機器學習軟件;這樣我就可以從數據庫中檢索數據,進行分析並以建立良好的報告,並做一些具體分析
我想知道,這是最好的辦法
建造或以更好的方式存儲你將如何解決這種情況?我以正確的方式嗎?
謝謝
安傑洛
http://stackoverflow.com/questions/35560823/what-is-big-data-what-classifies-as-big-data/35561146#35561146 –