1
我注意到，與兩個工人分佈式運行只使用一個核心每個工人。任務花費了更長的時間，然後預計完成
下面的腳本作爲一個例子需要大約20秒來獲得times2和5秒得到times。
這意味着每個工作人員使用單個內核執行4個任務，而不是並行使用全部4個內核。我還確認，每個工作人員只有一個核心使用資源監視器。
爲什麼僅爲工作人員使用一個內核而不是並行執行任務？
A
回答
1
因爲你的函數是純Python，它可能被GIL綁定。我建議改變你的工人，讓他們使用多個進程而不是多個線程。例如，如果在其上運行DASK-工作進程的機器有四個核心，那麼你可以按照以下方式啓動DASK-工作進程：
dask-worker scheduler-address:8786 --nprocs 4 --nthreads 1
相關問題
- 1. 異步任務花費很長時間才能完成任務
- 2. 刪除突然花費很長時間
- 3. INNER JOIN花費更長的時間
- 4. WHere子句花費更長的時間
- 5. AJAX請求花費太長的時間來完成請求
- 6. Python time.sleep花費時間更長
- 7. 代碼需要更長的時間，然後預計
- 8. 瞭解Ajax請求花了多長時間完成
- 9. CPIO命令花費很長時間才能完成
- 10. MySQL JOIN查詢花費很長時間才能完成
- 11. JavaScript函數花費太長時間才能完成？
- 12. GetGeopositionAsync花費太長時間才能完成
- 13. vim花費很長時間才能完成掃描標記
- 14. PowerShell：get-eventlog花費很長時間才能完成
- 15. Asp.net PreRenderComplete花費很長時間才能完成
- 16. Apache服務器計時花費很長時間
- 17. ：app：transformClassesAndResourcesWithProguardForRelease花費太長時間
- 18. ViewResult.ExecuteResult花費太長時間
- 19. 估計完成任務的時間
- 20. InputStream.close（）花費太長的時間完成（相對於文件大小的時間）
- 21. 「輪胎api」花費的時間比完成索引數據的時間長
- 22. Net.WebRequest花費了很多時間並且沒有完成響應
- 23. 如何在CRM 2016上爲每個人獲得計費任務和非計費任務的時間花費
- 24. 多線程是否會導致每個任務花費更長的時間？
- 25. 適當的設計，當需要完成長時間的任務，然後去下一個Android
- 26. jira記錄完成時間（不花費時間）
- 27. set-aduser花費的時間太長
- 28. ios - generateCGImagesAsynchronouslyForTimes花費的時間太長
- 29. ServletOutputStream花費很長的時間寫入
- 30. 調用SignedCMS.Decode花費的時間太長
要進行確認，如果在4核心，8線程CPU執行，啓動命令是：'dask-worker scheduler-address：8786 --nprocs 4 --nthreads 8'？ – Greg
我們通常每個核心啓動一個線程。 ' - 線程'應該重命名爲' - 每線程線程' – MRocklin
這是否意味着 - 內存限制設置也是每個內核？ – Greg