我有超過25000點人的數據如何管理這些數據,以便有沒有性能問題如何管理數據量非常大的文件夾中
1
A
回答
1
需要更多的信息。
您擔心哪些性能問題?儲存空間?查找速度?寫入速度?
數據如何排列?
通常這樣的數據集會自然存儲在數據庫中 - 是否有一個特定的原因,你爲什麼要將它存儲在文件夾?文件夾通常會要求您決定特定的查找系統/密鑰,而數據庫允許您根據自己的意願對數據進行切塊。
0
對於輸入/輸出,確保讀寫器被緩衝。
3
如果你想保留在文件中(而不是在數據庫中),一個重要的事情是將它們分散到子文件夾中。單個文件夾中的25000多個文件將是,比平均包含100個文件的250個子文件夾的訪問速度慢很多。
相關問題
- 1. 如何處理非常大的數據?
- 2. 如何在Android中處理非常大量的數據?
- 3. 如何管理非常大的MySql數據庫
- 4. 如何在WPF中管理包含非常大數據的列表框?
- 5. Angularjs管理大量數據
- 6. 大量文件的文件管理
- 7. 如何共享我的文件夾是非管理員?
- 8. 很多文本文件中的大量數據 - 如何處理?
- 9. 處理非常大的數據幀
- 10. 如何根據文件和文件夾管理jsTree的contextmenu
- 11. 如何管理非文件組件?
- 12. 管理大量數據(大約400Mb)
- 13. 如何管理源代碼管理中的常見源文件?
- 14. 如何管理實體中的常量
- 15. 如何使用Tableau處理非常大的數據
- 16. 如何處理擁有非常大數據的表?
- 17. 處理非常大的文本數據需要保存的文件格式
- 18. 非常大的CSV文件
- 19. 如何使用GitHub管理大型數據文件?
- 20. 在數據庫中存儲非常大的文件
- 21. 如何處理非託管代碼中的託管異常
- 22. 如何計算組件非常大的2向量的大小?
- 23. 如何在VS2010中的待處理更改窗口中管理大量文件?
- 24. 如何創建非常大的矢量
- 25. WIX中非管理員用戶的Appdata文件夾中沒有文件
- 26. c#中的管理非託管變量
- 27. 如何迭代PowerShell中包含大量文件的文件夾?
- 28. 春天如何管理與數據庫的大量連接?
- 29. 非常大的數據中的R
- 30. 使用VIM管理#TODO(大量文件)
取決於文件系統和特定的使用場景。我在NTFS上的測量結果表明,與使用分佈在676個子目錄中的相同文件相比,NTFS能夠以大約400K文件的速度運行。 – 2011-02-04 11:09:29