我們可以使用Hadoop MapReduce合併兩個文件代碼

Question

我們是否可以使用MapReduce代碼合併兩個文件。我知道-getmerge and cat command。

在此先感謝。

Answer 1

try { 
    FileSystem hdfs = FileSystem.get(conf); 
    FileUtil.copyMerge(hdfs, new Path(srcPath), hdfs, new Path(
          dstPath), false, conf, null); 
} catch (IOException e) { 
     e.printStackTrace(); 
} 

srcPath - 個別文件的目錄。