構建用於Hadoop Streaming的Hadoop作業對象

Question

我試圖從Java配置並運行Hadoop Streaming作業（我正在使用的系統希望Hadoop作業可以通過Java方法調用）。

我發現在org.apache.hadoop.streaming.StreamJob（http://hadoop.apache.org/common/docs/r0.20.2/api/org/apache/hadoop/streaming/StreamJob.html#createJob(java.lang.String[])）的createJob方法，但是這個方法返回一個JobConf對象，它已被棄用。有什麼辦法可以創建一個Job對象進行流式處理，或者將JobConf轉換爲Job？

Answer 1

大約有移植流的代碼來支持新的API幾JIRA票，但據我所知，這還沒有被普遍提供

• https://issues.apache.org/jira/browse/MAPREDUCE-1122
• https://issues.apache.org/jira/browse/MAPREDUCE-3619

請注意，即使使用JobConf提交old-api作業的方法已被棄用，它仍在最新的Hadoop 1.0.3版本中受支持。