large-files

0熱度

1回答

在當前時間嘗試使用golang HTTP服務器，並從該代碼進行編譯： package main import ( "io" "net/http" "time" ) func hello(w http.ResponseWriter, r *http.Request) { r.ParseForm() io.WriteString(w, "Hel

0熱度

1回答

使用XML包解析R中非常大的（10 GB）XML文件時出錯

上下文我目前正在研究涉及osm數據（打開街道地圖）的項目。爲了操作地理對象，我必須將數據（osm xml文件）轉換爲對象。 osmar包允許我這樣做，但它無法解析原始xml數據。錯誤錯誤膏（文件，崩= 「\ n」）：結果將超過2^31-1字節代碼 require(osmar) osmar_obj <- get_osm("anything", source = osmsource_file

0熱度

1回答

ASP.NET Web API請求未達到控制器操作

我無法使用HttpClient的PostAsJsonAsync方法將「大」對象發佈到我的web api中。這些對象包含一個base64編碼的圖像文件。經過一段時間這似乎是客戶端的超時設置，異常「任務被取消了。」由HttpClient拋出。超時時間已經設置得非常高（10分鐘）。這僅在大於〜2 MB的文件時纔會發生。任何更小的工作正常。我知道該請求甚至不會觸發控制器方法中的第一行代碼，因爲第一行

4熱度

3回答

如何從文本文件中讀取數百萬行並快速插入表格

我已經通過Insert 2 million rows into SQL Server quickly鏈接，發現我可以通過使用批量插入來完成此操作。所以我試圖創建數據表（如下面的代碼），而是因爲這是一個巨大的文件（超過300K行）我得到在我的代碼的OutOfMemoryEexception： string line; DataTable data = new DataTable(); strin

-1熱度

2回答

如何從一個大的10gb的xml文件中取得第一條記錄而不會出現內存錯誤來生成一個xml文件？

我有一個大的xml文件，大小爲10 gb，我想創建一個新的xml文件，它是從大文件的第一個記錄中生成的。我嘗試在java和python中執行此操作，但是由於我' m加載整個數據。在另一個帖子，有人建議XSLT是this.I'm新XSLT的最佳解決方案，我不知道如何在XSLT做到這一點，請提出了一些樣式表來做到這一點... 大型XML文件（10GB）樣本： <MemberDataExport xm

2熱度

1回答

Netlogo文件寫入/文件打印/文件類型輸出不完整的文件

在netlogo運行結束時，我想輸出520個特定於運行的變量。我已經使用文件寫入來做到這一點。但是，當我這樣做時，創建的輸出文件不完整。例如，如果我執行1,008次運行，則僅將734.xxx運行的結果寫入文件。下面是對文件的寫命令代碼： file-open "Part01Results.txt" file-write actualcombo file-write pa

1熱度

1回答

的logback - 動態配置

是否有可能配置在的logback等方式定製的logback屬性： <configuration scan="true" scanPeriod="60 seconds"> <property name="logFullMessage" value="false" />  <!-- project

0熱度

1回答

使用python燒瓶上傳大型csv文件的最佳方式

要求：使用燒瓶框架上傳文件。一旦上傳到服務器用戶應該能夠在用戶界面中看到該文件。當前代碼：爲了滿足上述要求，我編寫了上傳足夠大的文件的代碼，並且其工作正常（〜30 MB文件，當然沒有那麼快）。但是，當我嘗試上傳（〜100 MB）文件時，它耗時過長，進程永遠無法完成。這是目前我在做什麼： UPLOAD_FOLDER =「/ tmp目錄」 file = request.files['filenam

0熱度

1回答

高效的方法文件大文件下載

我正在研究基於Java的Web應用程序。此應用程序通過自定義休息客戶端爲應用程序消耗REST API，它是應用程序的一個子組件。現在我陷入了一種情況我必須編寫用於下載大型文件的代碼。其餘客戶端調用api，從Response獲取數據流並將文件寫入服務器的特定位置。我應該讀取文件並將其寫入輸出流嗎？還是有更有效的方法來實現這個功能？在此先感謝

-1熱度

1回答

爲什麼Windows任務管理器在寫入非常大的文件時顯示內存增加？我應該擔心嗎？

我開發一個C++應用程序（在VS2012，在Windows Server 2012 R2）寫入大量的二進制數據，從已經分配給原始文件緩衝區的週期性陣列。關鍵是Windows任務管理器報告的系統RAM使用率以線性速率增加，因爲fwrite將文件中的數據寫入文件中，直到它達到某個幾乎保持不變的點（也參見下圖）。此外，我的應用程序使用的內存始終保持不變。我定期調用fflush和它沒有任何效果。雖然它看