0
在配置單元中，爲什麼桶的數量應該等於reducer的數量？爲什麼配置單元中的桶數應該等於reducer數？
A
回答
0
因爲這是最優化的mapreduce工作方式（其他都相同）。任務將在減速器中分配。
在hive 0.x和1.x中，您必須指定以下內容：hive.enforce.bucketing = true。這意味着reducer的數量將根據您表中桶的數量自動確定。在更高版本的配置單元（2.x）中，這是默認設置。
來源：https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL+BucketedTables
相關問題
- 1. 選擇配置單元桶數
- 2. 如何確定配置單元中的桶數
- 3. 我應該如何分區s3中的數據以用於hadoop配置單元？
- 4. 爲什麼單元測試不應該使用數據庫？
- 5. 這裏應該等於什麼？
- 6. 爲什麼reducer的數量大於我在Hadoop中指定的數量？
- 7. 什麼數據類型用於配置單元中的IP地址？
- 8. 爲什麼Rails應該是單數形式的複數關聯？
- 9. 什麼應該用於SQLite數據庫
- 10. 爲什麼Array不等於數組（javascript）？
- 11. 爲什麼數值等於空值？
- 12. 爲什麼選擇計數（*）比配置單元中的選擇*要慢
- 13. 每個桶多於1個reducer
- 14. 爲什麼應該將define（'RELOCATE'，true）從wordpress配置中刪除？
- 15. SQL - 如果某個值等於某個數字，那麼行數應該等於該數字
- 16. 應該是什麼在單元測試
- 17. 爲什麼應該避免基於時間的隨機數？
- 18. 配置單元0.14：無法在帶桶的ACID支持表中插入數據
- 19. 將NULL數據轉換爲'\ N'以用於配置單元中的數字列。
- 20. 爲什麼hadoop 1.0.3中的reducer很慢
- 21. 什麼應該用於等待池中的用戶
- 22. 爲什麼Python設置（[]）不等於{}？
- 23. 爲什麼不能將變量設置爲等於Python中的函數調用？
- 24. 爲什麼* words []不等於**單詞？
- 25. 單個數值的總和應該如何等於數組中的父值？
- 26. 什麼S3 cors配置應該用於Firefox html5下載屬性？
- 27. 爲什麼線程函數的參數應該在堆中？
- 28. 爲什麼我應該爲JavaScript中的變量分配一個函數？
- 29. Rspec中的'應該'是什麼？爲什麼`應該redirect_to`工作？
- 30. 爲什麼表單元素不應該被命名爲submit？