如何查找我的AWS S3存儲桶或文件夾的總大小？

亞馬遜是否提供了一種簡單的方法來查看我的S3存儲桶或文件夾正在使用多少存儲空間？這是我可以計算出我的成本等。如何查找我的AWS S3存儲桶或文件夾的總大小？

2015-08-24 VernonFuller

很多選項在這裏：http://serverfault.com/questions/84815/how-can-i-get-the-size-of-an-amazon-s3-bucket。 – jarmod

截至2015年7月28日，您可以通過CloudWatch獲取此信息。

aws cloudwatch get-metric-statistics --namespace AWS/S3 --start-time 2015-07-15T10:00:00 
--end-time 2015-07-31T01:00:00 --period 86400 --statistics Average --region us-east-1 
--metric-name BucketSizeBytes --dimensions Name=BucketName,Value=myBucketNameGoesHere 
Name=StorageType,Value=StandardStorage 


Important: You must specify both StorageType and BucketName in the dimensions argument otherwise you will get no results.

來源

2015-08-24 21:54:54 VernonFuller

這也可以在控制檯中看到。注意S3存儲區是區域性的，因此檢查放置存儲區的任何區域都很重要。 – tedder42

工作正常，但CloudWatch意味着一些延遲。我的備份存儲桶花費了數小時纔出現。「1小時」窗口的可用性不會對我提供太多幫助，因爲我在09h49編寫了這個窗口，而我的最新可見日誌從昨天07h03開始。我想使用詳細的CW指標會有所幫助。 – Balmipour

返回任何內容對我來說： { 「數據點」：[]，「標籤」：「BucketSizeBytes」 } 桶已經住了好幾天。 – abrkn

作爲替代方案，你可以嘗試s3cmd，其中有一個杜命令類似Unix的。

來源

2015-08-25 14:03:34

我使用s3cmd du s3://BUCKET/ --human-readable查看S3中文件夾的大小。它以非常可讀的形式給出了關於桶中所有對象及其大小的詳細信息。

來源

2016-07-21 04:51:53 bpathak

兩種方式，

使用AWS CLI

AWS S3 LS --summarize --human可讀--recursive S3：//桶/文件夾/

如果我們最後省略「/」，它將獲得以文件夾名稱開頭的所有文件夾並給出所有文件夾的總大小。

AWS S3 LS --summarize --human可讀--recursive S3：//桶/文件夾

使用boto3 API

import boto3 

def get_folder_size(bucket, prefix): 
    total_size = 0 
    for obj in boto3.resource('s3').Bucket(bucket).objects.filter(Prefix=prefix): 
     total_size += obj.size 
    return total_size

來源

2016-12-20 23:16:13 Dipankar

僅適用於小桶，因爲它爲每個單個對象請求元數據。 +1在這種情況下 – geekQ

不起作用，列出所有文件及其各自的大小，無論結尾是否有斜槓。 – Eduardo