可以在同一張hbase桌上映射和縮小嗎?例如,考慮wordcount示例,我想映射列的每個單獨的行,將其縮小並立即在同一行中寫入worcount。有可能這樣做嗎?如果是,會有什麼表現?Hbase Map和Reduce在同一張桌上
1
A
回答
0
我還沒有嘗試過這個,但我確實看到了陷入無限循環的風險。
所以,如果你可以做到這一點,那麼你必須確保你用作輸入的鍵的範圍不會與作爲輸出產生的鍵重疊。
0
它取決於您使用的地圖縮小方法。如果你使用Bulk Load techniques這個操作是非常安全的,因爲它首先從表中讀取所有數據,並且只在更新它時進行。這對於表的大規模更新是有利的,並且在這種情況下,當直接與表一起工作的標準地圖縮減時,性能更好。
相關問題
- 1. Hbase Map reduce and Index
- 2. HBase:如何使用Map-Reduce刪除行
- 3. 如何在HBase上剖析map reduce工作
- 4. 在一張桌子上選擇查詢,並在同一張桌子上加入
- 5. 左外加在同一張桌子上
- 6. ManyToMany在同一張桌子上
- 7. FK在同一張桌子上
- 8. MongoDB在Map/Reduce上崩潰
- 9. 在MongoDB中使用同一個鍵調用多次Reduce map-reduce
- 10. HBase,Map/Reduce和SequenceFiles:mapred.output.format.class與新的地圖API模式不兼容
- 11. 同一張桌子上的INNER JOIN COUNT
- 12. 多核機器上的Hadoop和map-reduce
- 13. 在一張桌上的全文搜索比兩張桌快嗎?
- 14. Reduce,Map和Iterations:效率
- 15. 迭代Map和Reduce操作
- 16. 分組使用Map和Reduce
- 17. Map和Reduce /摺疊HList scalaz.Validation
- 18. 並排顯示一張桌子,一個iframe和一張桌子
- 19. 在同一張桌子上獲得不同ID的最高值?
- 20. 在同一張桌子上同時進行多筆交易
- 21. 在同一張桌子上合併2個不同的地方
- 22. Mongo NodeJS map reduce
- 23. SVD implementation map reduce
- 24. Hadoop Map Reduce CustomRecordReader
- 25. RavenDB Map Reduce Function
- 26. Sails.js mongodb map reduce
- 27. Hadoop Map-Reduce。 RecordReader
- 28. Map-reduce算法
- 29. MongoDB map-reduce
- 30. Hadoop map/reduce structure