1
我有一個map/reduce作業，它構建了一個數組，其中reduce 執行數組連接。有時，生成的文檔似乎 達到最大bson大小限制，並且映射減少失敗，並顯示「值太大而無法減少」錯誤。如何處理mongo map中的大型數據集縮小函數
請讓我們知道如何處理這種情況。我想要數組中的所有文檔。我不能，因爲它與上述錯誤而失敗，如果有更多的文件數組中的串聯..
感謝 MRK
A
回答
2
你可以使用類似的MongoDB的Hadoop適配器來運行你的地圖上降低一個真正的地圖上的工作/減少框架。
相關問題
- 1. 處理大數據集（neo4j，mongo db，hadoop）
- 2. 處理大型數據集
- 3. PowerShell如何處理大型數據集？
- 4. 在AngularJS中處理大型數據集
- 5. 在birt中處理大型數據集
- 6. 如何爲大型數據集中的python多處理選擇塊大小
- 7. 如何處理大小如10G的大型數據文件？
- 8. 異地處理大型mongo集合
- 9. 如何在大型數據集中處理sql中的日期
- 10. 如何用H2O處理大數據集
- 11. Highstock - 如何處理大數據集
- 12. 如何在放大和縮小時處理當前數據
- 13. 如何有效處理核心數據中的大數據集？
- 14. 處理大數據集
- 15. 在Base64string中壓縮大型數據集
- 16. 如何處理大型數據庫？
- 17. 如何處理大型數據列表
- 18. Android openGL：處理數組中的大型數據集（點雲）
- 19. 使用數據驅動的測試處理大型數據集
- 20. 處理R中的大數據集
- 21. 管理大型數據集
- 22. 使用Meteor和Mongo管理（索引）大型數據集
- 23. 大型數據庫處理
- 24. Dask數據框如何處理大於內存的數據集？
- 25. 大型不確定數據集的可伸縮集合
- 26. 爲大型數據集縮放大型併發API請求
- 27. 哪些參數決定處理器數據類型的大小？
- 28. 處理Google Apps腳本中的大型數據集
- 29. 加入較小的數據集與大型數據集
- 30. 用Impala處理龐大的數據集
afaik除了源代碼修改，目前還沒有辦法解決它。你可能需要重新考慮你減少的方式。 – soulcheck