使用Scrapy下載PDF文件

Question

我使用Scrapy（一種Python網頁抓取框架）從網站上下載PDF文件。

該網站需要遵循同一屆會議，以便讓您下載pdf。

它適用於Scrapy's，因爲它全部自動化，但是當我在幾秒鐘後運行腳本時，它開始給我假pdf文件，例如當我嘗試直接訪問pdf時，沒有我的會話。

這是爲什麼&怎麼解決這個問題？

Answer 1

我認爲該網站會跟蹤您的會話。如果它是一個PHP站點，請將PHPSESSID cookie傳遞給下載PDF文件的請求。