cloudera impala可以使用EMR中的任務節點嗎？

Question

我一直在EMR上試驗Impala，在我看來，它只使用集羣中的核心節點，而不是任務節點。

我使用EMR提供的內置Impala安裝，它是1.2.4。當我的集羣中有任務節點時，它們出現在Impalad管理應用程序的「已知後端」列表中。但是，在「查詢」頁面的「查詢位置」下，它只顯示羣集中核心節點的主機名，而不顯示任務節點。這表明查詢只在核心節點上運行。也許是因爲HDFS只在核心節點上？

任何人都可以證實這一點？如果是這樣，是否有辦法讓它使用它們？

乾杯 湯姆

Answer 1

帕拉將僅運行在覈心節點（數據節點），爲每個帕拉進程讀取/直接寫入本地存儲HDFS的查詢。這是Impala提高性能的方法之一。