0
我需要在GCS中將文件從一個桶移動到另一個桶進行處理,每次我只需要複製和處理一定數量的文件(比如說100)時,如何在命令行中配置它?gsutil複製,如何指定要複製的最大數量的對象?
的gsutil -m MV GS://bucket1/file001.json GS:// bucket2/
感謝您的幫助。
我需要在GCS中將文件從一個桶移動到另一個桶進行處理,每次我只需要複製和處理一定數量的文件(比如說100)時,如何在命令行中配置它?gsutil複製,如何指定要複製的最大數量的對象?
的gsutil -m MV GS://bucket1/file001.json GS:// bucket2/
感謝您的幫助。
你可以編寫一個腳本來建立一個所有要複製的對象的列表,然後一次遍歷它們100次,一次調用一個gsutil mv。與運行gsutil -m mv相比,這會失去並行性,因此您可以在後臺運行每個gsutil mv命令,然後等待所有100個完成,然後再繼續下一批。
源對象是按順序命名的嗎?例如file001,file002等? – jterrace 2014-11-24 18:44:07