如何將輸入文件劃分爲MapReduce的分片/文件

Question

因此，我正在使用Map Reduce框架研究wordcount程序，並最終了解它如何工作以及我需要實現什麼。但是我很困惑如何將單個輸入劃分爲不同的分片，然後使用線程爲每個分片分配一個地圖工作者。我知道你可以創建一個使用Linux命令拆分不同的文件，但我不知道如何將映射工作分配給每個文件然後從主文件

非常感謝

Answer 1

你不知道。您使用的InputFormat將自動處理。