java中的內存有效集合

Question

我們的應用程序是一個基於gigaspace的解決方案，它基本上從多個平面文件中讀取並將數據存儲在一個對象中。現在平面文件基本上包含一些裝運細節。因此，我們有多個文件

1. 船塢詳細
2. 集裝箱詳情
3. 貨運詳情
4. 等

現在我們有Dockyard作爲父對象下有可裝運許多對象細節。我們目前使用ArrayList來維護近5萬個船塢詳細對象的裝運細節。目前的數據量表明，對於每個Dockyard對象，我們將不得不維護大約1500個裝運細節對象，並且將有近5萬個船塢對象躺在堆中。我們目前的堆是8GB。

所以想知道如果ArrayList的是要保持這麼多的目標的最佳途徑。我已經尋找其他的API，如trove，HPPC，但它們大多在原始收集時提供好處。我們將是一個對象的集合。所以除了增加堆大小。有人可以建議任何其他更好的選擇。

Answer 1

您不需要將所有對象都放在堆上。以Chronicle Map爲例，您可以將所有對象關閉，因爲它們是內存映射文件，所以它們甚至不必在內存中。如果大部分數據不在堆中，您可能會發現可以減少堆大小。

將有近5萬船廠對象躺在堆。

這不是一個很大的對象。即使每個對象使用1 KB，那麼您也只使用50 MB。如果你的對象比這個大得多，那麼很可能你應該想辦法縮小單個對象的大小。

當我們使用基於原語集合它主要是爲了避免每個元素的對象頭。這節省了每個條目8-16個字節或最多800KB的情況。

但是，如果你的對象是1 KB至100 KB按照你的建議，你也許可以通過重組它們或使用不同的數據類型將減半，他們在使用內存的大小。

BTW 1 GB價值約的一個小時的時間。在花費太多時間之前，我會研究加倍內存大小。