0
我有這個懷疑，我正在運行一個單獨的NameNode和JobTracker的12節點羣集。我可以從JobTracker執行MapReduce作業，但我想從我的10個DataNode中的任何一個提交作業到JobTracker。這是可能的，如果是的話，如何做到這一點？如何將MapReduce作業從DataNode提交給JobTracker？
A
回答
2
是的，只要hadoop在路徑上（在每個節點上），並且集羣的配置已正確分配給每個數據節點。
實際上，您不一定需要配置才能正確分發，您只需要相應地配置jobtracker和hdfs網址（查看-jt和-fs選項的GenericOptionsParser選項）。
有關通用選項的更多信息，請參見此頁面：http://hadoop.apache.org/docs/r1.0.4/commands_manual.html#Generic+Options
相關問題
- 1. 配置的MapReduce作業提交
- 2. 如何從jar提交Dataflow作業？
- 3. 如何將作業提交給PBS中的特定節點
- 4. 如何在作業提交前將jar分發給hadoop
- 5. sudo jps not locate MapReduce jobtracker
- 6. 從oozie提交豬作業
- 7. 如何從另一個hadoop作業提交hadoop作業
- 8. Flink是否提供Java API以將作業提交給JobManager？
- 9. 通過java Processradilder提交mapreduce作業不會結束
- 10. Ambari HDP在提交mapreduce作業時拋出mapreduce.tar.gz的FileNotFoundException
- 11. Hive MapReduce作業提交失敗「目標是一個目錄」
- 12. 如何在hadoop mapreduce中提交配置文件目錄的作業？
- 13. 提交Hadoop作業
- 14. 如何在linux上提交R作業？
- 15. 如何提交oozie協調器作業
- 16. nohup命令將作業提交給集羣
- 17. Python：將不同的作業提交給不同的CPU
- 18. 是否可以將批處理作業提交給deezer API？
- 19. 將作業提交給Grid Engine中的多個主機
- 20. 使用Python將多個作業提交給超級計算機
- 21. 剖析MapReduce作業
- 22. HbaseTestingUtility和MapReduce作業
- 23. Mapreduce - 序列作業？
- 24. SecondaryNamenode和MapReduce作業
- 25. 多個MapReduce作業
- 26. 完成作業後提交批作業
- 27. 如何使用ResourceManager HA和Hortowork的HDP將MR作業提交給YARN羣集？
- 28. 資源經理如何將容器分配給提交的作業？
- 29. 如何以正確的方式將作業列表提交給PBS系統？
- 30. 如何遠程運行mapreduce作業