Linux - 將多個CSV文件合併爲一個

Question

我試圖將存儲在CSV文件中的多個結果連接在一起，第一列作爲索引。

問題是我有各種數量的文件，並且索引結果可能因文件而異，有些結果較少。

在Linux中，腳本化過程將所有文件合併到一個文件中最簡單的方法是什麼，空白字段爲空結果？我遇到過Linux加入，粘貼和列沒有運氣。 Mybe我應該嘗試使用另一種工具，或者Python或Perl？

數據文件是這樣的：

文件1：

  header1 header2 header3 
result_A 10   11  12 
result_B 13   14  15 
result_C 16   17  18 
result_D 19   20  21 
result_E 22   23  24 
result_F 25   26  27 

文件2：

  header1 header2 header3 
result_B 40   41  42 
result_F 43   44  45 

文件3：

  header1 header2 header3 
result_C 60  61  62 
result_D 63  64  65 
result_F 66  67  68 

並希望的結果應該是這樣的：

  file1 file1  file1 file2 file2  file2  file3 file3  file3 
      header1 header2 header3 header1 header2 header3  header1 header2 header3 
result_A 10  11  12               
result_B 13  14  15   40  41  42        
result_C 16  17  18          60  61  62 
result_D 19  20  21          63  64  65 
result_E 22  23  24               
result_F 25  26  27   43  44  45   66  67  68 

Answer 1

UNIX join應該讓你很長的路要走：

join -a 1 -e '0' "-t " -j 1 
    <(sort <(join -a 1 -e '0' "-t " -j 1 <(sort file1) <(sort file2))) 
    <(sort file3) 

（全部在同一行）。請注意0​​在引號內有TAB字符。輸入^V<Tab>。

如果你知道的輸入進行排序，這將是更好地使用

join -a 1 -e '0' "-t " -j 1 
    <(join -a 1 -e '0' "-t " -j 1 file1 file2) 
    file3 

（全部在一行上）打印：

id  header1 header2 header3 header1 header2 header3 header1 header2 header3 
result_A  10  11  12 
result_B  13  14  15  40  41  42 
result_C  16  17  18  60  61  62 
result_D  19  20  21  63  64  65 
result_E  22  23  24 
result_F  25  26  27  43  44  45  66  67  68 

現在，你可以看到，在我的Cygwin系統-e '0'顯然不能像廣告一樣工作。我建議在不同的系統上嘗試這個，因爲我不認爲在標準UNIX實用程序中發現了這樣一個重要的錯誤。

Answer 2

csvjoin from csvkit should also work。