爲什麼豬叫批處理

Question

豬是批處理嗎？如果是這樣，請讓我知道爲什麼它被稱爲批處理。它是批處理，因爲它運行的是縮減地圖。

Answer 1

在數據處理中，我們可以分別處理每個記錄（時間戳記錄稱爲事件）或處理稱爲批次的記錄集合。

Pig執行批處理，因爲它不會逐個處理輸入記錄，所以Pig會將所有可用記錄作爲一個批次加載到輸入路徑中。

Map Reduce是一個爲批處理設計的數據處理框架，mapreduce表示批處理，但批處理不是mapreduce。