如何將數組輸入到Map Reduce作業？

Question

我有一個服務不斷地檢索一些數據。我將這些數據轉儲到一個數組中，這些數據必須進一步處理。是否有可能創建一個動態數組，不斷更新由serivice，並排我可以執行Map Reduce作業？ 另外如何使用什麼類來簡單地採取數組輸入（而不是文件）？ PS我是Hadoop的新手/ Map Reduce 我使用Java編碼。

Answer 1

Hadoop是用於批處理的，所以它只有當你存儲了像文件這樣的數據並且需要處理和作業結束時纔是強大的。你可以看看Storm。我認爲它會更適合你的用例。