亞馬遜流彈性mapreduce獲取輸入文件名和設置輸出

Question

我正在使用亞馬遜流功能，是否有可能獲得文件輸入名稱？

也可以設置輸出，使每個新行不是一個新的文件？

Answer 1

如果這是你的問題，你沒有正確使用它。你的映射器不應該關心它正在處理的文件。它會從整個集合中獲取與您的--input參數匹配的數據塊，並將其發送到STDIN上的映射器。映射器應該處理輸入和輸出鍵 \ t * val1 *，val2，...然後，這些被傳遞給您的還原器（的其中一個）在其STDIN上。