2
我已經編寫了用於劃分數據集的自定義劃分器。我想要使用相同的分區程序對兩個數據集進行分區，然後在下一個mapreduce作業中，我希望每個映射程序都能處理來自兩個源的相同分區並執行一些功能，例如加入等。我如何確保一個映射程序獲取拆分對應於來自兩個源的相同分區？劃分的數據映射/減少
任何幫助將不勝感激。
A
回答
0
你所描述的是地圖邊連接的一種變體。 Pro Hadoop或org.apache.hadoop.mapred.join的第8章
相關問題
- 1. 分解函數映射，減少-JS
- 2. Mongodb映射減少與Apache Spark映射減少
- 3. 分佈式映射/減少框架
- 4. 分離Hadoop映射並減少任務
- 5. 使用RavenDB映射/減少分片數據
- 6. 排隊和映射/減少
- 7. MongoDB：映射沒有減少？
- 8. Mongodb併發映射減少
- 9. 如何數據簇映射合併減少對環境的
- 10. NativeIO chmod映射減少的「ENOTDIR」異常
- 11. 映射並減少返回的NAN值
- 12. MongoDB中嵌套值的映射減少
- 13. MongoDB的映射減少搜索條件
- 14. 的CouchDB如何映射減少
- 15. 使用MongoDB的映射減少
- 16. Javascript/JQuery中的異步映射/減少
- 17. 將數據寫入Cassandra Hadoop映射器（不減少）
- 18. Hadoop將數據從映射器減少到組合器
- 19. 使用Hadoop和HBase減少一個映射然後減少
- 20. 映射減少實例化異常
- 21. Hadoop排序映射並減少鍵值
- 22. ASP.NET MVC3路線映射減少幫助
- 23. Java 8文件readAlllines映射和減少
- 24. Neo4j-ogm：減少寫入/映射性能
- 25. 處理小文件映射減少hadoop
- 26. 使用Python劃分列表以映射數據的問題
- 27. 通過外部密鑰對MongoDB分組進行映射/減少
- 28. 參數映射縮減
- 29. 映射/減少計數的兩階段排序
- 30. 映射後的多個（獨立）減少函數