0
我有一個嵌入到Apache Tomcat Web容器中的Map Reduce程序。但是，在運行程序時，它將作爲本地作業運行器運行，而不是在具有jobClient的羣集上運行。 請幫我把作業提交到遠程集羣。什麼是提交作業和配置設置到Java程序的過程？如何從Web應用程序提交作業到hadoop羣集？
A
回答
0
當Hadoop找不到配置時，將以本地模式運行。當它可以找到它時，它需要其中包括JobTracker的地址
您可以在/ etc/hadoop/conf /目錄下放置mapred-site xml
或在作業配置中明確設置JobTracker URL。
相關問題
- 1. 如何將多個作業提交到hadoop羣集
- 2. 如何從Java向遠程YARN集羣提交級聯作業？
- 3. 使用AWS Hadoop集羣設置的Spark作業提交
- 4. 如何從另一個hadoop作業提交hadoop作業
- 5. 如何將Flink作業提交到遠程YARN集羣？
- 6. 如何從其他flink程序提交flink程序到集羣？
- 7. 通過socks代理將YARN作業提交到遠程Hadoop集羣
- 8. 提交Hadoop作業
- 9. 在lsf集羣上提交mpi作業
- 10. 無法提交從Windows IDE到Linux集羣的Spark作業
- 11. 使用spark-submit將應用程序提交到EC2集羣
- 12. 使用'-py-files'參數將PySpark作業提交到羣集
- 13. 使用MRJob將作業提交到EMR集羣
- 14. 可能從集羣模式下提交Spark應用程序提交輸出？
- 15. 錯誤提交COMPSs應用到羣集
- 16. 如何使用YARN在Hadoop集羣中安裝應用程序？
- 17. 如何正確提交火花的作業單機集羣
- 18. 遠程向Spark EC2集羣提交作業
- 19. Hadoop與Web應用程序的集成
- 20. 如何在集羣模式下將Spark應用程序提交到YARN？
- 21. 如何從IntelliJ IDEA提交代碼到遠程Spark羣集
- 22. glassfish集羣web應用程序部署
- 23. 從Hadoop集羣中運行Web抓取
- 24. 集羣作業調度程序：工具
- 25. Hadoop集羣工作
- 26. 如何強制condor將作業提交到集羣中的所有節點？
- 27. 用於在羣集上提交作業的Bash腳本
- 28. 使用Spark --jars選項向集羣提交PySpark作業
- 29. 從作業中獲取hadoop集羣信息
- 30. 提交市場企業應用程序
感謝您的答覆。我嘗試了將jobtracker配置放入程序中，但後來它找不到Mapper類。是否需要創建jar文件將作業提交給hadoop集羣？ – 2013-02-19 12:18:53
是的，您必須創建jar並調用「setJarbyClass」讓hadoop知道要發送的jar文件。 – 2013-02-19 19:55:58