0
我正在爲Python Scrapy構建一個擴展來獲取Crawler相關的詳細信息,如開始時間,結束時間,爬蟲狀態(打開,關閉或活動)。現在我需要將當前時間戳存儲在MySql數據庫表中。任何人都可以幫助我嗎? 我需要一個代碼MySQL數據庫從Scrapy代碼連接並做數據庫相關查詢像插入,選擇等。 謝謝..如何從Python Scrapy擴展插入數據到MySql數據庫表?
我正在爲Python Scrapy構建一個擴展來獲取Crawler相關的詳細信息,如開始時間,結束時間,爬蟲狀態(打開,關閉或活動)。現在我需要將當前時間戳存儲在MySql數據庫表中。任何人都可以幫助我嗎? 我需要一個代碼MySQL數據庫從Scrapy代碼連接並做數據庫相關查詢像插入,選擇等。 謝謝..如何從Python Scrapy擴展插入數據到MySql數據庫表?
您需要的項目管道添加到您的項目中,添加方法process_item這裏所描述:http://doc.scrapy.org/en/0.18/topics/item-pipeline.html#process_item
在該方法中,您必須將數據插入MySQL,如下所述:http://dev.mysql.com/doc/connector-python/en/index.html