2
hadoop中的地圖任務在輸入文件的64/128 MB分割中工作。它從輸入分割的第一行開始處理直到結束。我需要了解如何知道地圖任務何時完成處理其輸入拆分。換句話說，在洗牌和分類開始之前。 hadoop庫中有什麼方法可以回答我的問題嗎？在hadoop Map-Reduce中，如何知道地圖任務結束或文件分割結束
A
回答
5
Mapper類的cleanup方法允許您在完成處理輸入拆分後的映射器時執行代碼，只需以覆蓋map方法的相同方式覆蓋它即可。
如果這不是你想要的，也許Counter可以解決你的問題？
相關問題
- 1. 如何知道堆結束的地址？
- 2. 如何知道任務是取消還是等待期結束
- 3. 如何知道循環如何結束
- 4. 如何知道通話何時結束？
- 5. 如何知道流已經結束C＃
- 6. fscanf如何知道這是行結束？
- 7. 如何知道Optaplanner求解已結束？
- 8. 如何知道http響應結束？
- 9. 如何知道插件在CRM 2016中何時結束？
- 10. fread如何知道C文件何時結束？
- 11. 如何知道Angular.js摘要循環何時開始（或結束）？
- 12. 如何知道任意數量的異步操作的結束
- 13. 任務結束[C＃UWP]
- 14. 結束任務管理器
- 15. Backgroundrb計劃任務結束
- 16. Transloadit任務永不結束
- 17. 如何正確結束吞噬任務
- 18. 如何批量結束任務？
- 19. HTML5 WebSQL：如何知道db事務何時結束？
- 20. 如何知道HTTP頭部分何時結束？
- 21. 我如何知道cron作業已經開始或結束？
- 22. 如何在angularjs中通知$ interval結束
- 23. 任務結束後的處理結果
- 24. 當後臺任務結束時，ios是否有任何通知？
- 25. Hadoop作業剛剛結束
- 26. C＃結束任務沒有結束進程
- 27. 兩個分割的URL結束
- 28. 字符串分割多結束符
- 29. 什麼在Hadoop Reducer中結束？
- 30. php substr - 知道結束html標籤嗎？