從scrapy參數的腳本中運行Scrapy蜘蛛

Question

我在scrapy中寫了一個蜘蛛&我成功地通過python腳本運行它。 的問題，同時通過scrapy提示符下運行蜘蛛我們提供像 「-o ScrapedData.json -t JSON」 agruments我想運行 「scrapy爬myspider -o ScrapedData.json -t JSON」 通過Python腳本。 任何幫助是高度讚賞。提前致謝！

Answer 1

• -o ScrapedData.json覆蓋FEED_URI設置
• 和-t json覆蓋FEED_FORMAT設置

（見https://github.com/scrapy/scrapy/blob/master/scrapy/commands/crawl.py#L24）

所以，從腳本運行的蜘蛛時，你應該看看覆蓋這些2個設置。

Answer 2

您的意思是？

from scrapy import cmdline 

cmdline.execute("scrapy crawl myspider -o ScrapedData.json -t json".split())