elastic-map-reduce

    1熱度

    2回答

    我使用Amazon Elastic Map Reduce命令行工具粘合了大量系統調用。這些命令返回已經(部分?)轉義的JSON文本。然後,當系統調用將其轉換爲R文本對象(intern = T)時,它似乎會再次轉義。我需要清理它,所以它會用rjson軟件包解析。 我做的系統調用是這樣的: system("~/EMR/elastic-mapreduce --describe --jobflow j-2

    6熱度

    2回答

    當在Hadoop流式作業中使用分佈式緩存機制將文件傳輸到節點時,系統在作業完成後是否刪除這些文件?如果他們被刪除,我認爲他們是,有沒有辦法讓緩存保持多個工作?這對Amazon的Elastic Mapreduce工作方式是否一樣?