large-files

1熱度

3回答

我使用以下代碼來嘗試從UNC路徑 public void ReadWholeArray(string fileName, byte[] data) { int offset = 0; int remaining = data.Length; log.Debug("ReadWholeArray"); FileStream stream = new Fil

8熱度

15回答

如何連接兩個大容量文件，而且磁盤空間非常小？

假設您有兩個想要並置在一起的大文件（幾GB），但您的備用磁盤空間非常少（比如說幾百MB）。也就是說，如果給出file1和file2，您希望最終得到一個文件，這個文件是將file1和file2連接在一起逐個字節的結果，並刪除原始文件。你不能做明顯的cat file2 >> file1; rm file2，因爲在這兩個操作之間，你會用完磁盤空間。歡迎任何和所有平臺上的免費或非免費工具解決方案;這是

0熱度

1回答

上傳大文件時InputStream何時可用？

當上載大文件時可以使用PostedFile.InputStream嗎？我想將一個Stream傳遞給另一個進程，我希望如果正在上傳一個大文件，我可以直接將Stream傳遞到不寫入文件系統的新進程。由於進程和/或上傳可能需要一段時間，所以我想知道是否可以立即開始讀取InputStream，或者是否必須等待整個文件傳輸到服務器才能處理。我想一個更一般的問題是 - 涉及文件上傳時POST請求的生命週期

10熱度

7回答

什麼是全球同步大量數據的最佳方式？

我有大量的數據在世界各地的4個或5個站點上保持同步，每個站點大約有半個TB。這種變化（增加或改變）大約每天1.4千兆字節，並且數據可能在四個站點中的任何一個上發生變化。很大一部分（30％）的數據是重複的包（可能是打包的JDK），所以解決方案必須包含一種方法來獲取這樣的事實：在本地機器上存在這樣的事情並抓住他們，而不是從另一個網站下載。版本控制不是問題，這不是一個代碼本身。我只是有興趣，如果有

8熱度

8回答

Delphi中對於非常大的文檔的最快XML處理

我需要關於如何在Delphi（我使用Delphi 2009）中儘可能快地處理非常大的XML文件（例如100 MB）的建議。我需要輸入XML，從我的程序中訪問並更新其中的數據，然後再導出修改後的XML。希望輸入和輸出可以在幾秒鐘內在快速Windows機器上完成。澄清。我期望我將需要使用DOM，因爲訪問用於開發報表和更新數據的數據結構非常重要，而且我需要這個功能非常快。只有輸入一次才能完成文件

2熱度

4回答

在PHP中讀取大文件的最佳方法是什麼？

我必須逐行閱讀CSV文件，這可能是10到20兆。 file（）是無用的;-)，我必須找到最快的方法。我試着用fgets（），運行良好，但是我不知道每次我調用它時是否讀取一個小塊，或者如果它緩存一個較大的塊並優化文件I/O。我是否必須嘗試fread（）方法，自己解析EOL？感謝塞德里克

1熱度

2回答

在ASP.NET中處理大文件傳輸時，應該採取哪些預防措施？

我的ASP.NET應用程序允許用戶上傳和下載大文件。這兩個過程涉及讀取和寫入文件流。我應該怎麼做才能確保應用程序在處理大文件時不會掛起或崩潰？應該在工作線程上處理文件操作？

11熱度

5回答

在.NET中上傳大文件

我已經做了一些研究，以找到一個.NET上傳組件，我可以使用它上傳大文件，有一個進度條，並且可以恢復上傳大文件。我遇到了一些組件，如AjaxUploader,SlickUpload和PowUpload等等。這些選項中的每一個都需要花費金錢，只有PowUpload才能完成可恢復的上傳，但它可以通過Java小程序完成。我願意爲那些做得好的組件付費，但是如果我能自己寫這個會是最好的。我有兩個問題：是否

4熱度

4回答

在可移動媒體上在OS X和Windows之間傳輸5 GB文件的最佳文件系統

我需要在Windows XP計算機和運行Leopard的Mac之間傳輸DVD映像文件。機器沒有通過快速網絡連接，並且我有一些USB驅動器在我想要使用的位置浮動，例如， 8GB閃存，60GB和250GB USB硬盤。有時文件會超過4GB（FAT32上的單個文件的最大大小），並且我沒有在Leopard上使用NTFS。我不知道任何支持Mac/HFS文件系統的XP/Vista驅動程序。任何人都有什麼

17熱度

10回答

如何最好地在.NET中使用XPath與非常大的XML文件？

我需要在C＃中對相當大的XML文件進行一些處理（這裏可能大於千兆字節），包括執行一些複雜的xpath查詢。我遇到的問題是，我通常會通過System.XML庫執行此操作的標準方式喜歡在執行任何操作之前將整個文件加載到內存中，這可能會導致此大小的文件出現內存問題。我不需要更新文件，只需讀取它們並查詢其中包含的數據即可。一些XPath查詢涉及很多層次的父子關係 - 我不確定這是否會影響使用流讀取器的能