python
  • scrapy
  • 2016-06-08 42 views 2 likes 
    2

    我有以下元素:獲取的JavaScript回傳參數與scrapy

    <a class="html-attribute-value html-external-link" target="_blank" href='javascript:WebForm_DoPostBackWithOptions(new WebForm_PostBackOptions("ResultsGrid$15", "", false, "", "webproperty.aspx?s=id&amp;s=15&amp;time=201606080118012&amp", false, true))'>javascript:WebForm_DoPostBackWithOptions(new WebForm_PostBackOptions(&amp;quot;ucResultsGrid$R000000015&amp;quot;, &amp;quot;&amp;quot;, false, &amp;quot;&amp;quot;, &amp;quot;webprop.aspx?s=id&amp;amp;sr=15&amp;amp;time=201606080118012&amp;amp;id=15&amp;quot;, false, true))</a> 
    

    我想要得到的JavaScript參數試圖重建通過單擊鏈接上產生的請求。我發現:

    response.selector.xpath('//*[@id="ResultsGrid$15"]/@href').extract() 
    
    Out[20]: [u'javascript:WebForm_DoPostBackWithOptions(new WebForm_PostBackOptions("ResultsGrid$15", "", false, "", "webproperty.aspx?s=id&sdata=15&time=201606080037034&id=15", false, true))'] 
    

    這看起來不錯,並解碼JavaScript參數。我如何從那裏抓住他們?

    回答

    3

    您可以通過re() method和多個捕獲組做到這一點:

    response.selector.xpath('//*[@id="ResultsGrid$15"]/@href').re(r'javascript:WebForm_DoPostBackWithOptions\(new WebForm_PostBackOptions\("(.*?)", "(.*?)", (.*?), "(.*?)", "(.*?)", (.*?), (.*?)\)\)') 
    

    這裏我使用了一個相當寬泛.*? - 非貪婪匹配任何字符任意次數,但你可以更嚴格的是什麼字符匹配什麼參數。

    +0

    非常感謝! – user61629

    相關問題