亞馬遜S3檢查文件是否完全上傳

Question

我有兩個服務，一個以異步方式上傳到S3，第二個服務是後處理器，它對上傳的文件執行一些額外的處理。

我遇到的問題是在第二個服務中請求文件太快時，S3客戶端認爲該文件存在，因爲該鍵存在，但整個文件尚未上傳，因此出現異常拋出。

它工作，如果我執行阻止上傳，但表現是非常糟糕的。

有沒有辦法檢查到S3的文件是否已完全上傳？

Answer 1

用temp前綴您的密鑰名稱，然後在上傳完成後將其重命名爲原始文件名，以便您的下一個服務將檢查原始文件名並在原始文件存在時執行操作。

Answer 2

如果您使用AWS S3控制檯在存儲桶上啓用S3事件，則會發送文件創建完成事件以告訴您何時上載完成。這些事件可能會發布到SNS，SQS或AWS Lamba。