按順序在文件中獲取行的最佳方法是什麼？

Question

到現在爲止，我知道2的方式來獲取文件的一些線（包含約30.000線）：

int[] input = { 100, 50, 377, 15, 26000, 5000, 15000, 30, ... }; 
string output = ""; 
for (int i = 0; i < input.Length; i++) 
{ 
    output += File.ReadLines("C:\\file").Skip(input[i]).Take(1).First(); 
} 

或

string[] lines = File.ReadAllLines("C\\file"); 

int[] input = { 100, 50, 377, 15, 26000, 5000, 15000, 30, ... }; 
string output = ""; 
for (int i = 0; i < input.Length; i++) 
{ 
    output += lines[input[i]]; 
} 

行我想不需要通過是爲了輸入數組。

第一種方式，我不需要做lines array，其中包含30.000元（〜4MB），但我必須輸入的re-open file for each element。

第二種方式，我只需要read file one time，但必須有make an array大數據。

有什麼方法可以讓線條更好？謝謝！

Answer 1

您可以創建緩衝的迭代器，它會遍歷序列只有一次，並保持所需大小的緩衝區：

public class BufferedIterator<T> : IDisposable 
{ 
    List<T> buffer = new List<T>(); 
    IEnumerator<T> iterator; 

    public BufferedIterator(IEnumerable<T> source) 
    { 
     iterator = source.GetEnumerator(); 
    } 

    public T GetItemAt(int index) 
    { 
     if (buffer.Count > index) // if item is buffered 
      return buffer[index]; // return it 
     // or fill buffer with next items 
     while(iterator.MoveNext() && buffer.Count <= index)   
      buffer.Add(iterator.Current); 
     // if we have read all file, but buffer has not enough items 
     if (buffer.Count <= index) 
      throw new IndexOutOfRangeException(); // throw 

     return buffer[index]; // otherwise return required item 
    } 

    public void Dispose() 
    { 
     if (iterator != null) 
      iterator.Dispose(); 
    } 
} 

用法：

var lines = File.ReadLines("C\\file"); 
using (var iterator = new BufferedIterator<string>(lines)) 
{ 
    int[] input = { 100, 50, 377 }; 
    for(int i = 0; i < input.Length; i++) 
     output += iterator.GetItemAt(input[i]); 
} 

利用該樣本僅第一行377的文件將被讀取並緩衝，文件線將僅進行一次計數。

Answer 2

本文展示如何使用內存流從文件中讀取數據。你可以用它來緩衝文件的部分在同一時間，也許用回車作爲分隔符http://www.codeproject.com/Articles/164372/Back-to-Basics-Reading-a-File-into-Memory-Stream