使用數據管道將一個s3存儲桶中的特定數據複製到另一個存儲桶中

Question

我已經上傳aws s3存儲桶中的JSON文件，因爲JSON文件是以鍵和值的形式存在的，我只想將特定鍵數據複製到其他s3存儲桶使用aws數據管道。要做這個操作，我應該在管道定義中添加什麼。任何有線索的人都會非常感興趣。謝謝！

Answer 1

數據管道可以通過他們的ShellCommandActivity運行任何類型的shell腳本：http://docs.aws.amazon.com/datapipeline/latest/DeveloperGuide/dp-object-shellcommandactivity.html

所以，你可以設定將拉動從S3的數據（通過使用「階段」的能力）外殼活動，運行一些自定義腳本，並將數據推回到s3。