使用AWS Datapipeline將CSV轉換爲導入DynamoDB所需的格式

Question

使用Data Pipeline（https://docs.aws.amazon.com/datapipeline/latest/DeveloperGuide/dp-importexport-ddb-part1.html）將S3中的數據導入Dynamo DB表的AWS文檔引用S3文件（s3：// elasticmapreduce/samples/Store/ProductCatalog ），這是這種格式：

https://docs.aws.amazon.com/datapipeline/latest/DeveloperGuide/dp-importexport-ddb-pipelinejson-verifydata2.html?_sm_ovs=2DtvnqvHTVHW7q50vnqJqRQFVVnqZvnqMVVVVVVsV

的問題是...我怎麼得到的CSV說，4百萬行成這種格式擺在首位？這有什麼用嗎？

感謝您的任何建議......我有一個很好的谷歌，並沒有出現任何東西。

Answer 1

AWS Datapipeline服務支持CSV導入到發電機數據庫。您可以從aws控制檯爲datapipeline創建一個管道，並選擇「從S3導入DynamoDB備份數據」。將S3中存儲的CSV導入Dynamodb。

又見

http://docs.aws.amazon.com/amazondynamodb/latest/developerguide/DynamoDBPipeline.html#DataPipelineExportImport.Importing

Answer 2

已與此在他的迴應steveprk84，但我想叫出來：https://github.com/awslabs/data-pipeline-samples/tree/master/samples/DynamoDBImportCSV

蜂箱EMR支持DynamoDB作爲外部表型。此示例使用HiveActivity創建指向目標Dynamo表和源CSV的外部Hive表，然後執行Hive查詢以將數據從一個複製到另一個。