1
我注意到，與兩個工人分佈式運行只使用一個核心每個工人。任務花費了更長的時間，然後預計完成
下面的腳本作爲一個例子需要大約20秒來獲得times2和5秒得到times。
這意味着每個工作人員使用單個內核執行4個任務，而不是並行使用全部4個內核。我還確認，每個工作人員只有一個核心使用資源監視器。
爲什麼僅爲工作人員使用一個內核而不是並行執行任務？
A
回答
1
因爲你的函數是純Python，它可能被GIL綁定。我建議改變你的工人，讓他們使用多個進程而不是多個線程。例如，如果在其上運行DASK-工作進程的機器有四個核心，那麼你可以按照以下方式啓動DASK-工作進程：
dask-worker scheduler-address:8786 --nprocs 4 --nthreads 1
相關問題
- 1. 刪除突然花費很長時間
- 2. INNER JOIN花費更長的時間
- 3. 代碼需要更長的時間，然後預計
- 4. 瞭解Ajax請求花了多長時間完成
- 5. JavaScript函數花費太長時間才能完成？
- 6. CPIO命令花費很長時間才能完成
- 7. MySQL JOIN查詢花費很長時間才能完成
- 8. Asp.net PreRenderComplete花費很長時間才能完成
- 9. Apache服務器計時花費很長時間
- 10. ：app：transformClassesAndResourcesWithProguardForRelease花費太長時間
- 11. 估計完成任務的時間
- 12. 如何在CRM 2016上爲每個人獲得計費任務和非計費任務的時間花費
- 13. Select語句花費很長的時間
- 14. Android Html.fromHtml花費的時間太長
- 15. ServletOutputStream花費很長的時間寫入
- 16. 調用SignedCMS.Decode花費的時間太長
- 17. SQL查詢花費的時間太長
- 18. werkzeug.security.check_password_hash花費的時間太長
- 19. 備份我的數據庫花費的時間太長了
- 20. Spark Mongo連接需要很長的時間，然後預計
- 21. Netsuite API花費很長時間迴應
- 22. WMI查詢花費很長時間
- 23. getFrameBufferPixels在libgdx中花費太長時間
- 24. 熊貓功能花費時間太長
- 25. Android凌空JsonObjectRequest花費太長時間
- 26. POST回覆花費太長時間
- 27. MySQL查詢花費很長時間
- 28. Unix循環花費很長時間
- 29. 查詢花費很長時間DISTINCT
- 30. didUpdateLocations花費很長時間來加載
要進行確認，如果在4核心，8線程CPU執行，啓動命令是：'dask-worker scheduler-address：8786 --nprocs 4 --nthreads 8'？ – Greg
我們通常每個核心啓動一個線程。 ' - 線程'應該重命名爲' - 每線程線程' – MRocklin
這是否意味着 - 內存限制設置也是每個內核？ – Greg