在帶有「X」映射器和「Y」縮減器的大型MapReduce作業中，在排序/混洗階段中會出現多少個不同的複製操作

Question

據我所知，會有X + Y複製操作，

感謝

Answer 1

每個減速，在最壞的情況下可能會獲取所有映射器的記錄，假設它的鍵是存在在所有的映射器可用。在最壞的情況下，這會給一個減速器帶來X個副本。這將導致XY操作而不是X + Y。