如何讀取大文本文件？

Question

我有一個1000的文本文件，我想讀單到單，每個文件都有一個470萬的記錄，例如在文件中的行之一是：

43266200 6819   43295200 1393/05/23 14:28:45 113  1 

，我想保存到例如SQL服務器：

field1:43266200 
field2:6819 

我該怎麼做？

Answer 1

這可能會幫助你

var message ="43266200 6819   43295200 1393/05/23 14:28:45 113  1"; 
//Split your data into pieces 
var messages=message.Split(' ').Where(o => !string.IsNullOrEmpty(o)); 
var i=0; 
foreach(var item in messages) 
{ 
    // do whatever you wanna to do with pieces 
    Console.Write("field {0}:{1}",++i,item); 
} 

Answer 2

如果你正在閱讀從文件中的文本，並且可以合理地假定空格字符將是你唯一的分隔符，你應該使用String.Split()方法來標記每行：

// instantiate FileInfo of your file as yourFile 

foreach (string line in yourFile.ReadLines()) 
{ 
    string[] lineTokens = line.Split(new char[] { ' ' }, StringSplitOptions.RemoveEmptyEntries); 
} 

String.Split()允許你任何串分離成一個字符串[]基於所述char定界符你在第一個參數提供子串。上面代碼中的第二個參數是StringSplitOptions枚舉中的值之一，其值爲None（提供所有字符串）或RemoveEmptyEntries（不返回任何僅由分隔符字符組成的子字符串）。

然後，您可以從那裏遍歷lineTokens並從每個標記組裝一個對象，或者可以組裝任何給定索引對應於您要添加的行中列的SQL查詢。

Answer 3

var seperators = " ".ToCharArray(); 
foreach(var line in File.ReadLines(path)) 
{ 
    var fields = line.Split(seperators, StringSplitOptions.RemoveEmptyEntries); 
    //now you have fields[0] and fields[1], save them in your database 
}