0
我有許多位於S3的json文件。我需要獲取每個文件，提取相關信息，並將數據插入Amazon RDS中的mySQL數據庫中的各個表中。做這個的最好方式是什麼？這些文件不斷到達，所以我需要這個服務來運行所有的時間 - 獲取文件，解析它們並將數據插入數據庫。 謝謝！從S3中的json文件傳輸數據到RDS
A
回答
0
聽起來像你可能需要一個EC2實例，它爲S3上的文件運行24x7輪詢並執行所需的工作。
如何之大，例如是應該的，甚至有多少人你可能會部署取決於你所得到的文件體積，如何迅速，他們必須處理上。
如果是我，我會寫在C＃作爲一個控制檯應用程序的處理作業，旋轉起來的一個或多個EC2實例，然後安排與任務調度的工作。
如果Windows/.NET是不是您所選擇的平臺，你可以使用的語言和您所選擇的調度工具Linux機器上的等價物。
如果這是要很長一段時間（即個月以上）運行，可以考慮購買一個保留實例，你會節省相當多的錢在按需之一。
相關問題
- 1. 將文件從Mediafire傳輸到Amazon S3
- 2. 如何將數據從AWS Postgres RDS傳輸到S3（然後是Redshift）？
- 3. 如何將數據文件從s3導入postgresql rds
- 4. 如何將數據從JSON文件傳輸到PHP？
- 5. 將數據流傳輸到S3
- 6. 將大量大文件傳輸到s3
- 7. 從ios上傳數據庫文件到AWS s3問題
- 8. AWS數據管道備份RDS PSQL數據到S3
- 9. 直接從GAE上傳文件到S3
- 10. 從ec2上傳文件到s3
- 11. 如何將數據從EBS卷傳輸到S3存儲桶？
- 12. 如何將jquery數據從主文件傳輸到asp文件？
- 13. 使用boto將文件從ec2傳輸到s3時出錯
- 14. 將文件從s3傳輸到SFTP服務器
- 15. 從ASP.NET Core Web API將多GB文件傳輸到AWS S3
- 16. 如何將文件從S3傳輸到瀏覽器？
- 17. AWS速度，將文件從S3傳輸到Ec2？
- 18. 我想從文本文件傳輸數據到數組
- 19. 從火花傳輸中讀取新的s3文件路徑
- 20. 如何將數據從json文件傳遞到Angular 2的html文件中？
- 21. 在AWS RDS之間傳輸數據MySQL數據庫的
- 22. AWS複製S3到RDS
- 23. 將文件上傳到S3
- 24. 上傳文件到Amazon S3
- 25. 文件PUT'ed從文件傳輸科爾多瓦到S3包含不必要的元數據
- 26. 在.NET中，將數據從SQL流式傳輸到文件
- 27. 將數據從多個HTML文件傳輸到Excel中
- 28. 將上傳的文件直接傳輸到數據庫表中
- 29. 從Json文件Nifi流式傳輸
- 30. 將AWS文件加載到AWS中的rds數據庫中