我目前正在爲MapReduce運行Apache Ignite Hadoop加速器。作業運行,但我無法在JobHistoryServer中看到它們。我不希望看到Yarn的資源管理器中的工作(而不是)。Apache Ignite Hadoop加速器MapReduce作業不在JobHistory服務器中
我跑我的MapReduce作業像 hadoop --config path/to/config/ jar path/to/jar ....
在mapred-site.xml中,我已經添加
<property>
<name>mapreduce.framework.name</name>
<value>ignite</value>
</property>
<property>
<name>mapreduce.jobtracker.address</name>
<value>[your_host]:11211</value>
</property>
我mapreduce.jobhistory。*的設置沒有改變。
在覈site.xml中我已經添加
<property>
<name>fs.default.name</name>
<value>igfs://[email protected]/</value>
</property>
<property>
<name>fs.igfs.impl</name>
<value>org.apache.ignite.hadoop.fs.v1.IgniteHadoopFileSystem</value>
</property>
<property>
<name>fs.AbstractFileSystem.igfs.impl</name>
<value>org.apache.ignite.hadoop.fs.v2.IgniteHadoopFileSystem</value>
</property>
我還添加了點燃核-1.6.0.jar,點燃-Hadoop的1.6.0.jar和ignite- shmem-1.0.0.jar到$ HADOOP_HOME路徑。同樣,我已經導出了HADOOP_HOME,HADOOP_COMMON_HOME,HADOOP_HDFS_HOME和HADOOP_MAPRED_HOME。
Ignite不支持此功能嗎?或者我做錯了什麼?
另外,有沒有一種方法來跟蹤在Ignite上運行的MapReduce作業?