hadoop分佈式緩存

Question

我們如何更新hadoop分佈式緩存中的文件。 選項：

1. 更新分佈式緩存中的文件並重新啓動mapreduce作業。
2. 用新文件替換文件，並將指針位置更改爲指向新位置並重新啓動地圖縮減作業。
3. 在分佈式緩存中附加新值並重新啓動地圖縮小作業。
4. 其他選項.....

我用Google搜索，但無法找到我的問題，以便張貼在這裏的答案。 希望我能得到答案。

Answer 1

當mapreduce作業正在運行時，您無法更新DistributedCache，否則它將成爲關鍵競爭對手。

您必須重新啓動作業，並提交另一個DistributedCache數據 - 作業之間不存在DistributedCache持久性。