Scrapy電子郵件文件已完成刮

Question

我有一個運行在一定時間間隔的刮。我想在刮擦完成時發送電子郵件。要做到這一點，最好的方法是什麼？

我想寫一個擴展名，但我無法弄清楚如何從擴展中訪問輸出寫入的文件。

Answer 1

您是否考慮過連接spider_closed信號並使用scrapy.mail.MailSender服務？

scrapy.signals.spider_closed（蜘蛛，原因）

[...]

原因（STR） - 這說明了爲什麼蜘蛛被關閉的原因的字符串。 如果因爲蜘蛛已經完成抓取而關閉，原因是'已完成'。