在Ruby中使用固定大小的緩衝區讀取文本文件的正確方法是什麼？

Question

我試圖繞過Ruby的慢File.each_line實現。

def parse 
    @file   = File.open(@file) 
    @filesize  = @file.stat.size 
    @buffer_size = 10485 
    @offset  = @buffer_size 
    @counter  = 0 
    @line_counter = 0 

    @file.seek(0, File::SEEK_END) 
    while @file.tell > 0 
     @file.seek(-@offset, File::SEEK_END) 
     buffer = @file.read(@buffer_size) 
     buffer_line = buffer.split("\n")[1] 
     @counter += 1 
     puts @counter 
     @offset += @buffer_size 
     return if @offset > @filesize 
    end 
    end 

我不知道我怎麼能實現一個緩衝區，我可以存儲每行的其餘部分。

Answer 1

在ruby-talk郵件列表上討論了類似的問題。該線程被稱爲 Fast way to process large files line by line。