哪個job map reduce可以做，但apache crunch不能？

Question

我正在研究apache緊縮。據我所知，crunch是基於map-reduce框架的抽象框架。我打算使用緊縮而不是map-reduce框架。

我的問題是map-reduce可以做哪些工作，但是關鍵不能呢？

Answer 1

我不認爲有什麼像mapreduce可以做和apache緊縮不能。 Apache緊縮是一個在Mapreduce上工作的框架，就像Hive，Pig一樣。事實上，它通過編寫DoFn來簡化映射，從而簡化映射，並且緊縮使用執行計劃程序和引擎來實現映射中的業務邏輯或縮小階段。與純粹的地圖縮減代碼相比，加入等概念可以輕鬆實現。