如何使用Python請求登錄網站，存儲cookie，然後訪問網站上的另一個頁面？

Question

我正在嘗試使用Python腳本登錄網站，存儲我收到的cookie，然後使用該cookie訪問網站的會員專用部分。我已閱讀了幾篇關於此主題的文章和答案，但沒有任何答案適用於我。

以下是我嘗試訪問的網站登錄頁面的HTML代碼。

<form action="/login?task=user.login" method="post"> 
    <fieldset> 
     <table border="0" cellspacing="0" cellpadding="0"> 
     <tbody> 
                 <tr> 
      <td width="70" nowrap="">Username&nbsp;&nbsp;</td> 
      <td width="260"><input type="text" name="username" id="username" value="" class="validate-username" size="25"/></td> 
        </tr> 
                       <tr> 
      <td width="70" nowrap="">Password&nbsp;&nbsp;</td> 
      <td width="260"><input type="password" name="password" id="password" value="" class="validate-password" size="25"/></td> 
     </tr> 
                 <tr> 
      <td colspan="2"><label style="float: left;width: 70%;" for="modlgn_remember">Remember Me</label> 
      <input style="float: right;width: 20%;"id="modlgn_remember" type="checkbox" name="remember" class="inputbox" value="yes"/></td> 
     </tr> 
     <tr> 
      <td colspan="2" width="100%"> <a href="/reset-password"> Forgot your password?</a></td> 
     </tr> 
     <tr> 
      <td colspan="2" width="100%"> <a href="/username-reminder">Forgot your username?</a></td> 
     </tr> 
     <tr> 
      <td colspan="2"><button type="submit" class="button cta">Log in</button></td> 
<!--       <td colspan="1"><a href="/--><!--">Register Now</a></td>--> 
     </tr> 
     </tbody> 
     </table> 

     <input type="hidden" name="return" 
       value="aHR0cHM6Ly9maWYuY29tLw=="/> 
     <input type="hidden" name="3295f23066f7c6ab53c290c6c022cc4b" value="1" />     </fieldset> 
</form> 

這是我自己的代碼，我用來嘗試登錄。

from requests import session 

payload = { 
    'username': 'MY_USERNAME', 
    'password': 'MY_PASSWORD' 
} 

s = session() 
s.post('https://fif.com/login?task=user.login', data=payload) 

response = s.get('https://fif.com/tools/capacity') 

從我讀過的一切，這應該工作，但它沒有。我一直在爲此掙扎兩天，所以如果你知道答案，我會喜歡這個解決方案。

僅供參考，這裏都是我在希望看着一個答案其他StackOverflow的帖子：

1. Python Requests and Persistent Sessions
2. Logging into a site using Python Reqeusts
3. Login to website using python
4. How to 「log in」 to a website using Python's Requests module?
5. Python: Requests Session Login Cookies
6. How to use Python to login to a webpage and retrieve cookies for later usage?
7. cUrl Login then cUrl Download

Answer 1

你應該張貼所有需要的數據，你可以使用BS4解析登錄頁面，以獲得您需要的值：

from requests import session 
from bs4 import BeautifulSoup 

data = { 
    'username': 'MY_USERNAME', 
    'password': 'MY_PASSWORD' 
} 

head = {"User-Agent":"Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/51.0.2704.103 Safari/537.36"} 
with session() as s: 
    soup = BeautifulSoup(s.get("https://fif.com/login").content) 
    form_data = soup.select("form[action^=/login?task] input") 
    data.update({inp["name"]: inp["value"] for inp in form_data if inp["name"] not in data}) 
    s.post('https://fif.com/login?task=user.login', data=data, headers=head) 
    resp = s.get('https://fif.com/tools/capacity') 

如果你犯了一個請求並看看鉻工具或螢火蟲，表格數據看起來像：

username:foo 
password:bar 
return:aW5kZXgucGhwP29wdGlvbj1jb21fdXNlcnMmdmlldz1wcm9maWxl 
d68a2b40daf7b6c8eaa3a2f652f7ee62:1