在Hadoop中混洗自己

Question

在洗牌過程中，主機A發往主機B的中間（映射）輸出是否通過網絡發送，如果A！= B？這種行爲是依賴於Hadoop本身，還是基於底層操作系統的TCP/IP實現或其他方式免費獲得？

Answer 1

地圖輸出文件的分區通過HTTP可用於reducer。 如果A和B相同或不同，不應有任何區別。