out-of-memory

    0熱度

    1回答

    我試圖解決我在我的火花設置中看到的內存溢出問題,此時,我無法就我爲什麼看到這一點做出具體分析。編寫數據框到鑲木地板或卡夫卡時,我總是看到這個問題。我的數據幀有5000行。它的模式是 root |-- A: string (nullable = true) |-- B: string (nullable = true) |-- C: string (nullable

    0熱度

    2回答

    我正在使用java代碼處理巨大的CSV(1GB)。 我的應用程序運行在具有8GB內存的2核心機器上。 我正在使用以下命令啓動我的應用程序。 java -Xms4g -Xmx6g -cp $CLASSPATH JobSchedulerService 應用程序啓動一個線程從S3下載CSV並處理它。 應用程序工作文件一段時間,但OutOfMemoryError處理文件的一半。 我正在尋找一種方法,可

    0熱度

    2回答

    我在主機上啓動docker服務並每次啓動一個容器進行一次測試。 我曾經在測試結束時使用以下cmd以檢查測試是否超出內存: dmesg | grep -F -e 'Out of memory' -e 'invoked oom-killer: gfp_mask=0x' -e ': page allocation failure: order:' 但我發現,如果在測試過程中OOM,它運行後,它會成爲

    1熱度

    1回答

    我現在面臨Python和大熊貓內存問題, 的代碼非常簡單, for i in range(5): df = db_controller.read_from_database(i) print(df) df是一個熊貓數據幀從數據庫中讀取,每次迭代增加在〜1Gb的彈性內存中,所有迭代都會從數據庫中檢索相同的數據。在我看來,每次迭代時,彈性內存不應該增加,因爲變量df超出了範圍(

    -1熱度

    2回答

    在工作簿的每個頁面上,都有一個狀態欄,由狀態框組成。有三種狀態 - 「Tab Started」,「Design Updated」和「Configurations Complete」。最初,我在每個頁面上調用了這些框(並使用絕對引用),但我最近試圖通過將代碼移動到單獨的模塊並在頂部附近的每個工作簿頁面上調用它來提高工作簿的效率和靈活性(+使用「查找」而不是絕對引用來設置變量)。 但是,雖然這個工作時

    0熱度

    1回答

    從平面文件的,我的任務是從數據庫驗證數據不存在我想驗證使用Java首先我之後,我嘗試檢查Hashset1.Contain(Hashset2),這樣我就可以識別哪些數據是不是在DB當前插入平面文件數據到HashSet1和另一Hashset2對於DB數據。 鑑於以下是無效代碼,你可以假設hashset1(這是一些缺失數據)文件閱讀器的數據和hashset2(從數據庫中全部數據)爲DB數據 但正如我在這

    0熱度

    3回答

    我在我的應用程序得到OutOfMemoryError: FATAL EXCEPTION: Thread-11746 Process: kr.co.iosystem.blackeyeonandroid, PID: 1618 java.lang.OutOfMemoryError: pthread_create (1040KB stack) failed: Try again at java.la

    0熱度

    2回答

    我可以更新我用於連接的同一列嗎?看起來我可以,但我的腳本崩潰了。 背景:我有一箇舊數據庫,我正在遷移。我正在通過在PHP循環中運行的大量MySQL查詢處理它。循環工作人員很好,每個查詢需要0.5到1 MB的內存來處理。直到它擊中這個查詢,突然需要什麼記憶我已經分配給PHP的101%: UPDATE a.t1 INNER JOIN t2 ON t1.category = t2.o

    0熱度

    1回答

    我使用下面的代碼並獲得Java的內存不足的錯誤讀取JSON文件: BufferedReader br1 = new BufferedReader(new FileReader(filename)); try { StringBuilder sb = new StringBuilder(); String line = br1.readLine(); while (line != null)

    0熱度

    1回答

    我正在寫一個將結構化文件讀入對象(循環函數)的excel解析web api。 但我注意到一個重大的內存秒殺,而解析一些文件,因此會拋出OutOfMemory異常。 excel解析引擎需要在讀取其結構之前加載整個文件。我發現它並不是消耗大部分內存的加載,而是解析(​​將excel轉換爲結構化對象)以及json http返回(將對象序列化爲json),這最終會殺死內存。例如,一個1M大文件可以解析爲7