2017-03-24 92 views
1

enter image description here k.imgur.com/r8NIv.png火花洗牌讀取時間

enter image description here

我有很難處理來自星火UI此信息。具有最低火花洗牌讀取大小/記錄的執行者花費最長時間來讀取洗牌塊,如圖中所示。我不理解這是否是代碼問題,或者這是否是數據節點問題。

回答

0

也許它不僅是由於洗牌讀取大小造成的,影響洗牌時間的因素很多,如分區數量。您可以嘗試修改關於洗牌的配置參數。 shuffle-behavior