s3cmd

    8熱度

    3回答

    我在服務器上有一大堆文件,我想將它們上傳到S3上。這些文件以.data擴展名存儲,但實際上它們只是一堆jpegs,png,zip或pdf。 我已經寫了一個簡短的腳本,它可以找到mime類型並將它們上載到S3上,並且可以工作,但速度很慢。有沒有辦法使用gnu parallel進行下面的運行? #!/bin/bash for n in $(find -name "*.data") do

    0熱度

    1回答

    我收到了Amazon S3上的公共數據集(授權用戶公開)的用戶名,訪問密鑰ID和祕密訪問密鑰ID。我一直在使用s3cmd與我的私人帳戶和S3存儲桶。我如何配置s3cmd,以便我可以訪問我以前的私人憑證以及我收到的新公共數據憑證?

    19熱度

    7回答

    我曾經嘗試都s3cmd: $ s3cmd -r -f -v del s3://my-versioned-bucket/ 而且AWS CLI: $ aws s3 rm s3://my-versioned-bucket/ --recursive 但是這兩個命令只需添加DELETE標記到S3。刪除存儲桶的命令也不起作用(來自AWS CLI): $ aws s3 rb s3://my-versio

    0熱度

    2回答

    使用s3cmd在使用我的root權限(訪問密鑰和密鑰)進行配置後,每當我嘗試使用sync或get從存儲桶下載某些內容時,我都會收到這個奇怪的我的權限錯誤root帳戶: WARNING: Remote file S3Error: 403 (Forbidden): 所有者是另一個用戶我一直在使用IAM控制檯做,但我是正確的期望,root用戶應始終得到全面和不受限制地訪問? 還使用aws -cli我

    0熱度

    1回答

    我想知道是否有方法從S3跨區域複製中排除特定文件。我知道前綴選項,但我不想包含在我的存儲桶中的緩存文件夾。 例子: 我要包括以下內容: 圖像/生產/圖像1/file.jpg 但我不希望包括此: 圖像/ production/image1/cache/file.jpg

    0熱度

    1回答

    配置s3cmd通過s3cmd --configure即使在提供正確的訪問憑證後仍然失敗。引發的錯誤是ERROR: S3 error: Access Denied。我正在使用版本1.5.2,通過pip下載。 Default Region設置爲美國,但我不住在那裏。這是否導致任何問題,因爲我的時鐘設置爲不同的時區? PS:那些已經寫過關於配置s3cmd的人,沒有去選擇Default Region。可能

    0熱度

    1回答

    我已經有了一個包含大量未加密文件的存儲桶,我需要使用256位AES密鑰對它們進行加密。我已經寫了一個Java代碼來加密這些文件,它工作正常。我想知道的是,如果提供的s3cmd工具也支持加密過程,如果這樣做會爲我節省很多時間。 我已經生成了一個AES密鑰,如果我能以某種方式使用s3cmd put命令遞歸加密所有文件,這將是一個很大的幫助。任何請求...... :)

    0熱度

    1回答

    我正在使用s3tools同步服務器上的文件和s3存儲桶。具體來說,我正在使用sync命令。但是,這不能正常工作,因爲我找不到分配給我設置的用戶的正確權限。幾乎所有的東西都可以正常工作,但我常常從s3cmd sync命令中得到一個錯誤:「遠程複製失敗」。 這是我目前的政策: { "Version": "2012-10-17", "Statement": [ {

    1熱度

    1回答

    嗨,我有一個shell腳本,它包含ubuntu 12.04 LTS上的s3cmd命令。 我爲這個shell腳本配置了cron,可以在本地環境下正常工作,但不要將文件推送到s3。但是當我手動運行shell腳本時,它將文件推送到s3而沒有任何錯誤。我檢查了日誌,並沒有發現這一點。這是我的shell腳本。 #!/bin/bash User="abc" datab="abc_xyz" pass="[

    0熱度

    1回答

    我在網絡連接不好的情況下使用s3cmd。有時,它會在同步過程中停止,導致文件半損壞/文件損壞。通常情況下,我希望它繼續停頓,但在這種情況下,由於各種原因,我不希望下載不完整。 有什麼方法告訴s3cmd永遠不會保存尚未完全下載的本地文件,而是在下一次同步時重新開始。