創建一個python腳本登錄到一個網站，並拉HTML數據

Question

您好我希望有人能幫助我，

我試圖創建一個登錄到網站，並拉動從HTML我有一個值的腳本安裝BeautifulSoup和我試圖使用捲曲，但我似乎無法登錄到該網站。網站上的HTML使用爲j_username」和爲j_password

感謝

Answer 1

使用requests模塊要使用基本身份驗證檢索HTML：

>>> r = requests.get('https://api.github.com/user', auth=('user', 'pass')) 
>>> html = r.text 

然後使用bs4解析HTML您需要的具體內容。