實時數據分析的最佳方式

我目前對實時數據分析感興趣，使用預測分析的實時飛機性能數據。可以使用哪些工具和技術在研究層面實施這樣的系統？實時數據分析的最佳方式

2017-07-04 TheShark

您好，歡迎堆棧溢出，請閱讀如何創建[最小，完整和可驗證示例]（https://stackoverflow.com/help/mcve），並檢查[如何提出好問題]（https://stackoverflow.com/幫助/如何問），這樣你增加了獲得反饋和有用答案的機會。 – DarkCygnus

我只需要知道什麼是工具和技術，比如Sparks，Hive，HBase，Kafka可以用來做實時分析？ – TheShark

問這是關於堆棧溢出的話題，你的問題也不是很清楚。請閱讀提供的鏈接以瞭解原因，並在可能的情況下編輯或刪除問題。 – DarkCygnus

對於實時數據分析，如果我將在你的地方我將不得不選擇以下技術

1）卡夫卡的實時資料擷取。

2）火花流以流化處理

3）火花ML用於使用機器學習算法（預測）

4）的Apache齊柏林用於可視化。

5）數據存儲，您可以使用蜂巢或HDFS按您的需求

6）神經節進行性能監視

希望這可以幫助!!! ...

來源

2017-07-05 06:07:05 Bhavesh

太棒了！非常感謝。再次提出一個簡單的問題。如果我嚴格限制在Hadoop生態系統中，我的可能性有多大？還是因爲Map-Reduce而嚴格允許批處理？ – TheShark

我會說HADOOP對於批處理不是很好，對於實時處理不是很好，Spark一定會爲您提供實時流處理以及預測（機器學習）在一個..我說Spark一定會提供很好的處理它將是一個不錯的選擇!!! ... – Bhavesh

謝謝你的評論！ – TheShark

回答