在Spark UI中，當任務的狀態爲GET RESULT時，這意味着什麼？

Question

我有一個Spark工作，它使用Spark ML的邏輯迴歸來訓練一個模型。在樹狀聚合階段的階段詳細信息頁面下的Spark UI中，我看到一些狀態爲「GET RESULT」的任務。

這個狀態是什麼意思？什麼導致任務處於這種狀態？

Answer 1

如果檢查TaskInfo你會看到「獲取結果」 status要求gettingResult設置爲true和發生這種情況時gettingResultTime不爲零。

最後gettingResultTime表示：

當任務開始遠程獲取結果的時間。如果在任務完成時立即發送 任務結果（而不是發送 IndirectTaskResult，稍後從塊管理器獲取結果），則不會設置該值。

因此總結它意味着任務已經完成並且結果從塊管理器中獲取。