1300萬個文件gridfs mongo

我們必須存儲大約1300萬個文件並對這些文件執行一些標準操作。我們正在使用Windows。第一個問題是我們可以將它存儲在文件系統上嗎？文件總大小約爲6000TB。我正在檢查MongoDB上的gridfs。我不知道這是否是一個好方法。我們將在服務器端使用Java。
如果能夠舒適地存儲這些文件，那麼獲取文件並將其提供給用戶以及文件重命名，元數據更新等操作的性能會如何。
我們還需要將所有文件備份到輔助文件系統存儲後來。但是gridfs中的文件將以塊的形式存儲。所以問題是我們如何快速獲取所有這些文件並將其發送到輔助文件系統。
請讓我知道我應該採取的方法。1300萬個文件gridfs mongo

來源

2012-03-16 Blue Sky

@JeffFoster，仍然不知道要遵循什麼路徑。研究一些高性能的文件系統，Ceph，Lustre等。我對文件系統知之甚少。網格是一個更好的選擇...？ – 2012-03-16 09:46:33

@Vish由傑夫寫的，這是專業的東西...而不是「正常」親可能...對於專業親:-) – xanatos 2012-03-16 09:51:49

MongoDB是網絡規模，所以它應該很好

來源

2012-03-16 10:46:21 Phil

如何備份所有的文件存儲在gridfs到輔助文件系統存儲工作，可以輕鬆完成嗎？ – 2012-03-16 11:00:56

強制NSFW帖子：http：//www.youtube.com/watch？v = b2F-DItXtZs。另外，將GridFS備份到另一個文件系統並不是非常直觀，如果您將文件存儲在Windows上，則從GridFS數據庫中檢索它們會使很多MS應用程序（如Word，Excel，Photoviewer）無法讀取它們。如果你在Linux上，你應該沒問題。 – PinkElephantsOnParade 2012-06-22 13:35:24

1300萬個文件gridfs mongo

回答

相關問題