0
Spark中斷並執行代碼到stage.I也知道它是一個進度條，它提供有關Spark中的staging部分的信息。當作業在羣集上運行時，我們可以從控制檯中以下行中的數字獲得什麼信息。在作業運行時解釋控制檯中的Apache Spark stage progress bar
[階段133：（4000 + 4）====>（1 + 1）/ 13000]
A
回答
1
進度條指示[Stage 133:(4000 + 4) ====> (1 + 1)/13000]
(numCompletedTasks + numActiveTasks)/totalNumOfTasksInThisStage]
完成的任務數= 1
活動任務數= 1
在這個階段的任務總數= 13000
請參閱here的細節
相關問題
- 1. 運行作業時的參數解釋
- 2. 解釋Spark Stage輸出日誌
- 3. Progress Bar Javascript（HELP！）
- 4. 減少Apache Spark作業/應用程序的運行時間
- 5. Spark流作業調度控制執行？
- 6. CSS Progress Bar Error
- 7. Jquery Progress Bar body
- 8. Progress Bar not incrementing
- 9. 長時間運行ETL過程 - 後臺作業，Spark，Hadoop
- 10. 控制在UNIX上運行的後臺作業數殼
- 11. Progress Bar not loading？
- 12. CSS circle-progress-bar
- 13. Progress Bar and gevent
- 14. Apache Spark Jobc完成但hadoop作業仍在運行
- 15. Java Progress Bar遠程執行
- 16. 在後臺運行作業
- 17. Spark作業服務器中的Spark作業「java.lang.NoClassDefFoundError：org/apache/spark/sql/SQLContext」的錯誤
- 18. Unicode和控制檯解釋
- 19. 在Unix中的後臺運行作業
- 20. 如何獲得Apache Spark作業的DAG而不運行它？
- 21. Apache zepplin的點火作業運行速度比spark-submit
- 22. Android - Progress Bar not updating
- 23. Spark/Hadoop作業沒有運行在parralel
- 24. 在Linux/Apache的後臺運行Cron作業
- 25. Apache spark的訪問控制
- 26. 在Rails 3中運行後臺作業
- 27. 如何在火花輸出控制檯中抑制「Stage 2 ===>」？
- 28. SQL作業無法運行C＃.NET控制檯應用程序
- 29. gcloud控制檯指示作業正在運行，而hadoop應用程序管理器說完成
- 30. 在Apache Felix OSGI中安裝並運行Web管理控制檯