5
我需要什麼:如何重新啓動Scrapy蜘蛛
- 開始履帶
- 履帶完成任務
- 等待1分鐘
- 開始履帶再次
我試試這個:
from scrapy.crawler import CrawlerProcess
from scrapy.utils.project import get_project_settings
from time import sleep
while True:
process = CrawlerProcess(get_project_settings())
process.crawl('spider_name')
process.start()
sleep(60)
但得到的錯誤:
twisted.internet.error.ReactorNotRestartable
請幫我做的是正確
的Python 3.6
Scrapy 1.3.2
的Linux
看看http://stackoverflow.com/a/39955 395/2572383 –