2
我們已經在HBase中創建了表，並且這些表使用HBase存儲處理程序映射到Hive。如果表中有超過100億的巨大記錄，並且如果我們需要根據某個列來連接這兩個表，並且這些列不是行密鑰ID列，那麼性能如何，有沒有什麼方法可以提高性能在表中連接映射到HBase的Hive表。連接到Hive表映射到HBase
Regards， GHK。
A
回答
1
您使用Hive JOIN性能的哪個底層存儲無關緊要。所以HBase rowkey並不能幫助你與Hive。
你可以使用的一個技巧是mapjoin，如果你加入了一個巨大的小桌子，它的工作效果非常好。
你可以閱讀更多關於蜂巢此鏈接https://www.facebook.com/notes/facebook-engineering/join-optimization-in-apache-hive/470667928919
相關問題
- 1. 如何將Hive表映射到HBase中？
- 2. 連接表沒有映射到對象
- 3. JPA映射映射到3列連接表
- 4. Starbase連接到Hbase
- 5. Python連接到Hive
- 6. MongoDB的Hive表映射
- 7. Hibernate映射 - 映射到表
- 8. NHibernate：在連接表上映射連接
- 9. 映射表連接查詢
- 10. hbase無法連接到hadoop
- 11. 將HBase連接到Grafana
- 12. 用Ruby連接到Hbase
- 13. trafodion無法連接到hbase
- 14. 將spark-streaming連接到HBase
- 15. 無法連接到Hbase remotly
- 16. 從Hive連接到MySQL
- 17. 如何在Hive中映射沒有限定符的HBase列？
- 18. 將表單值映射到鏈接
- 19. 休眠註釋映射到連接表複合鍵
- 20. 將Grails域類映射到連接表中的問題
- 21. 單個類映射到兩個表連接
- 22. 休眠@OneToMany - 映射到多個表連接
- 23. Automapper：映射到接口
- 24. 列表映射到列表
- 25. 在Hive中註冊Hbase表
- 26. Hive的桶映射加入
- 27. 將數據連接到HBase並與Hive整合會對性能產生影響
- 28. 休眠映射 - 連接表沒有@Id
- 29. 休眠查詢未映射連接表
- 30. 流利的NHibernate連接表映射
我得到了它的連接性能，但在蜂巢我們有分區這也幫助我們限制了連接操作的記錄數，如果我們有一個蜂巢映射表HBase，那麼有沒有辦法在表連接中實現更快的響應 – GHK
我認爲目前HBase存儲處理程序不可能實現。看看這個關於這個https://issues.apache.org/jira/browse/HIVE-1223的JIRA –