我注意到,如果我將減速器的數量設置爲0,組合器將無法工作。沒有減速器的情況下可以使用組合器嗎?謝謝。Mapreduce工作:組合器沒有減速器
1
A
回答
1
不,它不是。即使使用指定的減速器,也不保證組合器的使用。所以組合器是嚴格的優化,可以但不一定在Reducers之前調用。如果沒有減速器,這些將永遠不會被調用。
0
組合器的全部目的是'合併'部分映射器輸入,以便在發送到縮減器時映射輸出消耗更少的網絡帶寬。沒有減速器,使用組合器的重點就變得沒有實際意義。因此,不,這是不可能的。
相關問題
- 1. MapReduce低效減速器
- 2. Hadoop中沒有減速器的組合器
- 3. 單元測試減速器,測試每個減速器或組合減速器?
- 4. Mapreduce組合器
- 5. 鏈接多減速器在一個Hadoop MapReduce工作
- 6. 爲什麼Redux中沒有組合減速器接收狀態?
- 7. Hadoop MapReduce Java實現中的減速器
- 8. 彈性MapReduce中可用的減速器
- 9. 你可以使用組合減速器組成深層狀態減速器嗎?
- 10. 組合減速器最佳實踐
- 11. MapReduce - 減速機不結合鍵
- 12. 結合多個減速器
- 13. MapReduce減速器之間的作業分配
- 14. 沒有調用Hadoop減速器
- 15. 減速器在mapreduce wordcount程序中沒有被驅動程序調用
- 16. 設計/組合減速機減速機
- 17. RavenDB MapReduce減少或聚合MapReduce結果服務器端
- 18. 組合器和減速器可以不同?
- 19. 商店沒有有效的減速器。反應減少
- 20. Hadoop組合器:在字數mapreduce程序中使用與組合器相同的縮減器代碼?
- 21. Redux - 組合減速器如何知道應用狀態的哪個子組通過減速器
- 22. 組合Redux減速器與同一組件的不同實例
- 23. 動態縮減器組合
- 24. hadoop-mapreduce reducer-組合器輸入
- 25. MapReduce與組合器的執行時間
- 26. 如何刪除mapreduce減速器輸出r-00000延伸
- 27. MapReduce - 減速器給出錯誤的輸出日期
- 28. 最後減速器在MapReduce中非常緩慢
- 29. 終極版:組織容器,組件,動作和減速
- 30. mapreduce工作沒有得到執行