cron無法運行Scrapy

Question

crontab中的代碼0 * * * * cd /home/scrapy/foo/ && scrapy crawl foo >> /var/log/foo.log

無法運行爬網，因爲我的日誌文件中沒有日誌。 我使用0 * * * * cd /home/scrapy/foo/ && pwd >> /var/log/foo.log進行測試，它在日誌中回顯'/ home/scrapy/foo'。

我也試過PATH=/usr/local/bin和PATH=/usr/bin，但沒有成功。

我可以通過在命令行中鍵入cd /home/scrapy/foo/ && scrapy crawl foo來手動運行它。

有什麼想法？謝謝。

Answer 1

問題解決了。而不是像root那樣運行爬網，請使用crontab -u user -e爲user創建一個crontab，並以user運行。

Answer 2

您應該使用日誌模塊（https://docs.python.org/2/library/logging.html）不重定向。（如果你使用記錄模塊，您可以處理日誌路徑和日誌級別）

，並嘗試在crontab中這段代碼

0 * * * * /usr/bin/python2.7 /your/file/path/filename 

（或scrapy ..任何你想要的）