使用可選列高效地讀取CSV文件

Question

我試圖編寫一個讀取CSV文件的程序（無需擔心轉義任何東西，它嚴格格式化爲不帶引號），但值爲0的任何數字項目是而只是留空。因此法線會是什麼樣子：

12，STRING1，string2,3 ,,, string3,4.5

，而不是

12，STRING1，string2,3,0,0，string3,4.5

我有一些使用矢量的工作代碼，但速度太慢。

int main(int argc, char** argv) 
{ 
    string filename("path\\to\\file.csv"); 
    string outname("path\\to\\outfile.csv"); 

    ifstream infile(filename.c_str()); 
    if(!infile) 
    { 
     cerr << "Couldn't open file " << filename.c_str(); 
     return 1; 
    } 

    vector<vector<string>> records; 
    string line; 
    while(getline(infile, line)) 
    { 
     vector<string> row; 
     string item; 
     istringstream ss(line); 
     while(getline(ss, item, ',')) 
     { 
      row.push_back(item); 
     } 
     records.push_back(row); 
    } 

    return 0; 
} 

是否有可能超載運營商類似How to use C++ to read in a .csv file and output in another form?的ostream的< <時域可以是空白的？ 會提高性能嗎？

或者還有什麼我能做的，讓這跑得更快？ 謝謝

Answer 1

從文件中讀取字符串數據的時間大於解析字符串數據的時間。在解析字符串時，您不會節省大量時間。

爲了讓程序運行得更快，請將更大的「塊」讀入內存;每次讀取獲得更多數據。研究內存映射文件。

Answer 2

處理此問題以獲得更好性能的一種替代方法是將整個文件讀取到緩衝區中。然後通過緩衝區並設置指向值開始位置的指針，如果找到a或行末尾放在\ 0中。

例如https://code.google.com/p/csv-routine/