2016-06-09 9 views
1

我正在使用具有3個節點的MapR(YARN)羣集。我正在嘗試在集羣上部署6個Samza作業,以便對數據流進行一些處理。所有工作都是正確的。我試着平行部署2-3個工作。 但是,當我平行部署所有6個Samza作業時,我會看到以下日誌。任務繼續運行,不產生預期的輸出數據流。ContainerRequestState [INFO]隊列中沒有更多未決請求

enter image description here

在我的ResourceManager網絡信息中心節點的狀態如下 - enter image description here

任何人都可以提出如何加以解決。我認爲,應用程序可能沒有足夠的資源來並行運行所有這些資源。我可以嘗試什麼變化?

+0

您可以顯示您的Hadoop集羣配置。多少個vCore,內存......因爲每個容器需要1個內核,每個Samza工作者需要1024mb(默認)內存。 – MaximeF

回答

0
no more pending requests in queue. 

此消息意味着您的卡夫卡主題中還有更多消息。