在scrapy中使用CrawlerRunner的ReactorNotRestartable錯誤

Question

我已經在文檔中使用了相同的代碼，但是使用設置實例化Crawlrunner的小差異，以便它不會錯過管道操作。如果不使用它，它將正常工作，但將跳過管道。

from twisted.internet import reactor 
import scrapy 
from scrapy.crawler import CrawlerRunner 
from scrapy.utils.log import configure_logging 
from forspef_scrapper import ForspefScrapper 
from scrapy.utils.project import get_project_settings 

configure_logging({'LOG_FORMAT': '%(levelname)s: %(message)s'}) 
runner = CrawlerRunner(get_project_settings()) 

d = runner.crawl(ForspefScrapper) 
d.addBoth(lambda _: reactor.stop()) 
reactor.run() 

請建議此原因和可能的修復。

Answer 1

刪除reactor.stop的回調，您不應再看到該問題。該反應堆設計爲始終運行