Scrapy：存儲數據

Question

我是新的python和scrapy。我打算遵循Scrapy教程，但我不明白storage step的邏輯。

scrapy crawl spidername -o items.json -t json 

scrapy crawl spidername --set FEED_URI=output.csv --set FEED_FORMAT=csv 

我不明白的意義：

• -o
• -t
• --set

謝謝您的幫助

Answer 1

你可以通過輸入來查看可用命令的列表從您的項目目錄中。

scrapy crawl spidername -o items.json -t json 

• -o指定傾倒物品（items.json）輸出文件名
• -t指定傾倒物品（JSON）

scrapy crawl spidername --set FEED_URI=output.csv --set FEED_FORMAT=csv

• --set是格式用於設置/覆蓋設置
• FEED_URI用於設置項目轉儲的存儲後端。在這種情況下它被設置爲「output.csv」這是使用本地文件系統，即一個簡單的輸出文件（例如電流 - output.csv）。
• FEED_FORMAT用於設置串行化格式的（輸出）進料即（對於當前的例子CSV）

參考文獻（Scrapy文檔）：

1. Available tool commands (for the command line)
2. Feed exports