如何找到在網站上使用的身份驗證

Question

我一直在閱讀有關beautifulSoup，http頭，身份驗證，cookie和一些關於機械化的內容。

我想用python刮我最喜歡的藝術網站。就像我找到了一個刮板的偏差藝術。現在我試圖登錄，但我嘗試的基本身份驗證代碼示例不起作用。

所以問題，我如何找出什麼類型的驗證網站使用，以便我知道我正在嘗試登錄正確的方式？在嘗試阻止漫遊器時包含有效的用戶代理等內容。

忍受我的無知，因爲我是陌生的HTTP，Python和刮。

Answer 1

您感興趣的任何網站都不太可能使用基本身份驗證。您需要一個類似機械化的庫來管理cookie，並且您需要將登錄信息提交到網站的登錄頁面。