電子病歷Oozie示例

Question

有人可以請解釋什麼是EMR（EMRFS）工作時，oozie動作的名稱節點和作業跟蹤程序。我明白，名稱節點是特定於hdfs，但如果我使用EMRFS，那麼它應該是在oozie中的值。

Answer 1

name-node應該是namenode FQDN：運行HDFS namenode守護程序的EMR主節點的端口或IP：端口。 job-tracker是YARN資源管理器地址。由於OOZIE仍然使用HDFS（不是S3），所以它們在有或沒有EMRFS的情況下保持不變。基於Action，YARN容器（mappers/redurs）可能會使用EMRFS，您無需爲其設置任何內容。

你可以看到這個端口列表中找到所需的端口，EMR： http://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-4.2.0/emr-release-differences.html#w2ab1c66c15

您還可以找到他們fs.default.name，核心的site.xml /紗的site.xml/mapred現場的mapred.job.tracker設置.xml文件。