在Amazon Elastic Map Reduce中對Amazon DynamoDB的數據運行自定義MapReduce Jar

Question

我在DynamoDB中有要運行mapreduce作業的數據。我發現了很多教程，其中涉及到使用Hive針對EMR中的dynamoDB數據運行SQL，但對於我要執行的任務，將很難高效地將我的任務編寫爲SQL，而我寧願只寫一個自定義地圖 - 減少罐子。這是可能的，還是隻能編寫Hive SQL來查詢dynamoDB？

Answer 1

您絕對可以在沒有Hive的情況下查詢DynamoDB。

亞馬遜提供APIs，這將允許您radand寫入到DynamoDB。因此，您可以使用Hive來編寫自己的MapReduce作業，而Mapper使用此API查詢DynamoDB。