美麗的湯也能擊中網頁事件嗎？

Question

Beautiful Soup是一個用於從HTML和XML文件中提取數據的Python庫。我會用它來提取網頁數據，但我沒有找到任何方法來點擊按鈕，anchor label這是在我的情況下使用的頁面導航。所以爲此我必須使用任何其他或beautiful soup有我沒有意識到的能力。

請指教！

Answer 1

要回答你的標籤/評論，是的，你可以一起使用它們（Selenium和BeautifulSoup），不，你不能直接使用BeautifulSoup來執行事件（點擊等）。儘管我自己從未在相同的情況下一起使用它們，但假設的情況可能涉及使用Selenium通過特定路徑導航到目標頁面（即，這些選項爲click()，然後是到下一頁的按鈕），然後使用BeautifulSoup閱讀driver.page_source（其中driver是您創建的'驅動'瀏覽器的Selenium驅動程序）。由於driver.page_source是頁面的HTML，因此您可以按照習慣使用BeautifulSoup，解析出您需要的任何信息。

簡單的例子：

from bs4 import BeautifulSoup 
from selenium import webdriver 

# Create your driver 
driver = webdriver.Firefox() 

# Get a page 
driver.get('http://news.ycombinator.com') 

# Feed the source to BeautifulSoup 
soup = BeautifulSoup(driver.page_source) 

print soup.title # <title>Hacker News</title> 

主要的想法是，你需要閱讀頁面的源代碼，任何時候，你可以以讀取任何你想要傳遞給driver.page_sourceBeautifulSoup。