-1
如何在Scrapy（python）中設置線程池大小？在Scrapy中設置線程池大小
A
回答
4
由於Scrapy不使用多線程，而是使用所謂的底層異步HTTP框架Twisted你說的肯定是你有多少蜘蛛可以同時運行？請參閱CONCURRENT_REQUESTS文檔。 默認：16
相關問題
- 1. Java線程池大小（Executors）
- 2. 優化線程池大小
- 3. 設置線程池中的最小線程數
- 4. 設置線程池中的最大線程數少於核心
- 5. 動態調整大小的線程池
- 6. 蟒蛇線程池的大小
- 7. 更改JVM的線程池大小
- 8. sidekiq忽略池大小設置
- 9. Sails Framework + MongoDB設置連接池大小
- 10. 如何爲MySQLDataSource設置池大小？
- 11. 如何設置Oracle連接池大小？
- 12. 池大小爲1的Java線程池1
- 13. 無法在mysql中設置線程堆棧大小
- 14. 當池大小小於線程數時，避免ConnectionTimeoutError
- 15. node-postgres：設置最大連接池大小
- 16. Spring AsyncRestTemplate連接池和線程池設置
- 17. 在運行時確定libuv線程池的大小？
- 18. 在使用ExecutorService時「刷新」固定大小的線程池
- 19. 設置石英線程池的線程數
- 20. 阿卡均衡池中有可變大小的線程池執行人
- 21. 如何設置的BasicDataSource最大池大小或連接大小Spring框架
- 22. 線程池中的線程
- 23. 線程池配置問題
- 24. .NET線程池和配置
- 25. C++中的線程池設計
- 26. 線程池在C＃
- 27. Java多線程性能隨線程池大小的增加而變差
- 28. 如何爲線程池中的單個線程設置時間限制？
- 29. 關閉一個固定大小的線程池
- 30. Java - 管理線程池的大小（主要增加）
scrapy沒有一個線程池。你的意思是如何增加併發請求的數量 - 在文檔中有幾個設置覆蓋了這一點。 – 2013-04-07 09:01:49