刮緩存頁面

python
scrapy
browser-cache

2016-10-14 194 views 0 likes

我以獲取一些網頁內容，以這種方式使用scrapy：刮緩存頁面

class PitchforkTracks(scrapy.Spider): 
    name = "pitchfork_tracks" 
    allowed_domains = ["pitchfork.com"] 
    start_urls = [ 
        "http://pitchfork.com/reviews/best/tracks/?page=1", 
        "http://pitchfork.com/reviews/best/tracks/?page=2", 
        "http://pitchfork.com/reviews/best/tracks/?page=3", 
    ]

一切工作正常。

現在，而不是直接擊中頁面，我想刮googlecaches的同一頁。

什麼是合適的syntax來實現？我想試試"cache:http://pitchfork.com/reviews/best/tracks/?page=1",，無濟於事。

來源

2016-10-14 data_garden