outputformat

3熱度

1回答

如何過濾Hadoop map/reduce作業輸出文件中的鍵或值？

通常情況下，Hadoop的地圖/減少工作產生寫入作業的輸出文件（使用OutputFormat類）鍵值對的列表。很少，鍵和值都很有用，通常鍵或值都包含所需的信息。 是否有一個選項（在客戶端），以抑制輸出文件鍵或抑制輸出文件中的值？ 如果我想的只是一個特定的工作做到這一點，我可以創建新的OutputFormat實現，會忽略鍵或值。但是我需要通用的解決方案，可以重複使用更多的工作。 編輯：我可能不清楚我

java hadoop mapreduce outputformat 2012-11-26

---