爲什麼火花流被稱爲接近實時？

Question

我知道Spark Spark使用微量批處理數據，但在某些情況下，處理時間不到一秒鐘。我的問題是「不能把它稱爲純實時處理，而不是在那個實驗室裏進行實時處理？」

Answer 1

我想說，我們只能在收集數據並將其直接推送到儀表板或系統時進行實時指標，警報和優化，而無需任何ETL過程，實時目的是，主要是速度。

每當有批次的流程提取歷史趨勢或基準時，儘管時間不到一秒，但不是實時的，而是接近它，這是因爲他們談論的是接近實時的。

所以，要回答你的問題，我會說不，因爲你正在進行配料和加工，所以接近實時。

我希望它有幫助。

涓

Answer 2

火花流將所述數據流分成的X秒批次稱爲Dstreams，其內部是RDDS，一個用於每批間隔的序列。每個RDD都包含在批處理間隔期間收到的記錄，因爲其小批量處理過程幾乎不實時。