使用python請求實現質詢/響應方案

我開始學習如何使用python請求模塊。對於練我試着管理挑戰/響應的問題：我要訪問的數據上http://lema.rae.es/drae/srv/search?val=hacer 使用python請求實現質詢/響應方案

隨着Firefox中的「篡改數據」插件我檢查了必要的HTTP請求：

GET http://lema.rae.es/drae/srv/search?val=hacer 
POST http://lema.rae.es/drae/srv/search?val=hacer

我複製在兩個HTTP請求中由Firefox發送精確的標題，並在Python中實現JavaScript「挑戰」功能。然後，我正在執行以下操作：

url = "http://lema.rae.es/drae/srv/search?val=hacer" 
headers = { ... } 
r1 = requests.get(url=url, headers=headers) 
html = r1.content.decode("utf-8") 
formdata = challenge(html) 
headers = { ... } 
r2 = requests.post(url=url, data=formdata, headers=headers)

不幸的是，服務器無法按預期的方式應答。我檢查了所有通過「r.request.headers」發送的頭文件，他們完全同意firefox發送的頭文件（根據Tamper Data）

我在做什麼錯？

你可以在這裏檢查我的全碼：http://pastebin.com/7JAZ9B4s

這是響應頭我應該得到：

Date[Tue, 10 Feb 2015 17:13:53 GMT] 
Vary[Accept-Encoding] 
Content-Encoding[gzip] 
Cache-Control[max-age=0, no-cache] 
Keep-Alive[timeout=5, max=100] 
Connection[Keep-Alive] 
Content-Type[text/html; charset=UTF-8] 
Set-Cookie[TS014dfc77=017ccc203c29467c4d9b347fb56ea0e89a7182e52b9d7b4a1174efbf134768569a005c7c85; Path=/] 
Transfer-Encoding[chunked]

這是響應頭我真的得到：

Content-Length[5798] 
Content-Type[text/html] 
Pragma[no-cache] 
Cache-Control[no-cache]

來源

2015-02-10 thomas

通過google找到了。這是行不通的：https：//github.com/vibragiel/glotologia/blob/master/enmiendas_drae/enmiendas-drae.py另一方面，以下建議我們需要設置一個cookie：http://stackoverflow.com/questions/26952643/how-to-obtain-a-cookie-from-a-remote-domain-using-greasemonkey但是對於我來說，在瀏覽器中禁用cookie時，頁面也可以工作。 – thomas 2015-02-11 09:06:46

這工作（！）：https://github.com/javierhonduco/nebrija我仍然需要找出它是如何工作的... – thomas 2015-02-11 09:46:51

...它總是發送相同的挑戰字符串，它不設置任何cookie還是什麼？ – thomas 2015-02-11 09:57:06

我發現我的代碼不起作用的原因：

The serv呃希望POSTDATA的排列順序與表單的輸入元素完全相同。在我的代碼中，input-elements的值存儲在python字典中。但是這種數據類型不能保存聲明值的順序！

ruby腳本（在註釋中提到）然而確實工作，因爲ruby字典數據類型似乎保留了聲明的順序！

此外，在python中重新實現javascript challenge（）函數根本就沒有必要，因爲服務器會很樂意接受任何響應字符串（過去一直工作）一遍又一遍！

來源

2015-02-11 10:43:11 thomas

一種解決方案，即以預定義順序發送標題的一種方式是使用urllib2.urlopen，它需要一個包含POSTDATA的'params'參數作爲一個字符串（當然必須排序）。 – thomas 2015-09-09 05:59:02

使用python請求實現質詢/響應方案

回答

相關問題