與蟒蛇

Question

https://plus.google.com/s/casasgrandes27%40gmail.com/top

我需要抓取與蟒蛇以下頁面，但我需要它的HTML鏈接沒有的通用源代碼爬行後如何獲得的HTML代碼。

例如

打開鏈接：plus.google.com/s/casasgrandes27%40gmail.com/top而不登錄第二最後一個縮略圖將「G套件」。

<div class="Wbuh5e" jsname="r4nke">G Suite</div> 

執行此python代碼後，我無法找到上述的HTML代碼行。

from bs4 import BeautifulSoup 
import requests 

L = list() 
r = requests.get("https://plus.google.com/s/casasgrandes27%40gmail.com/top") 
data = r.text 
soup = BeautifulSoup(data,"lxml") 

print(soup) 

Answer 1

爲了得到湯對象嘗試以下

page = requests.get(url) 
soup = BeautifulSoup(page.content, 'html.parser') 

http://docs.python-requests.org/en/master/user/quickstart/#binary-response-content https://www.crummy.com/software/BeautifulSoup/bs4/doc/

Answer 2

你可以試試這個代碼讀取HTML頁面：

import urllib.request 

urls = "https://plus.google.com/s/casasgrandes27%40gmail.com/top" 
html_file = urllib.request.urlopen(urls) 
html_text = html_file.read() 
html_text = str(html_text) 
print(html_text)