hadoop集羣中的各個端口？

Question

我想了解各種守護進程/進程在Hadoop集羣中偵聽的各種端口。

核心的site.xml

<property> 
      <name>fs.defaultFS</name> 
      <value>hdfs://master.hadoop.cluster:54310</value> 
    </property> 

紗的site.xml

<property> 
      <name>yarn.resourcemanager.address</name> 
      <value>master.hadoop.cluster:8032</value> 
    </property> 

我看到我們還有其他三個端口，它們是：

1）50070 - >要請參閱hdfs GUI
2）8088 - >要查看RM GUI
3）8042 - >不確定哪個GUI我們可以在此端口看到

由於有這麼多的端口，我不清楚哪個端口是用於哪個端口。如果我向端口發出HTTP請求，比如說在8032，它說這是Hadoop IPC port。

任何人都可以幫助我理解這一點，我們應該瞭解的主要端口號是什麼，以及哪些進程在這些端口上進行偵聽。

Answer 1

fs.defaultFS中定義的端口用於文件系統元數據操作。您不能將其用於訪問Web UI。 8042用於NodeManager Web UI，8032用於ResourceManager IPC。

參考

• hdfs-default.xml - 對HDFS相關端口
• yarn-default.xml - 紗線相關端口
• mapred-default.xml - 爲JHS相關的端口。