使用Crunch將數據寫入MongoDB

Question

我們將使用Apache Crunch來實現我們的新解決方案。我們希望從HBase中提取數據，然後應用一些邏輯來篩選出不合格的數據，最後將數據以結構化的方式寫入MongoDB以供進一步處理。這是可行的嗎？關於如何使Crunch與MongoDB一起工作的任何想法？

Answer 1

Mongo有一個Java驅動程序。所以，如果您需要執行任何mongo操作，您可以調用驅動程序來獲取Mongo連接並插入記錄。如何使用Java連接到Mongo的詳細信息涵蓋了here。由於您正在編寫Java代碼，因此您應該可以使用此驅動程序來執行操作。我假設你正在使用Java。