2016-01-13 98 views
1

我需要將2.5TB的數據從文件系統同步到AWS中的s3。將大量數據同步到s3(aws)

我將使用AWS CLI命令:

「AWS S3同步S3:// MyBucket」

此命令將當前文件夾同步到S3桶被稱爲MyBucket。

我的問題是:

1)是否有可能做到這一點一氣呵成,不超時?

2)我期望考慮數據量的限制/問題是什麼?

回答

2

A假設你在談論單個文件或幾個非常大的文件?如果是這樣的話:

1)是的,文件將上傳一小部分,所以你不必擔心這種事情。 2)需要很長時間,這是不可避免的。如果給定文件部分的上傳失敗次數過多,則上傳將被中止。