Python 3.X僅在頁面加載完成時才提取源代碼

Question

我在網頁上提交查詢。查詢完成前需要幾秒鐘的時間。只有當它完成後，它纔會顯示一個我想從中獲取信息的HTML表格。假設這個查詢最多需要4秒才能加載。儘管我希望在加載數據後立即獲取數據，但等待4秒鐘然後從表中獲取數據是可以接受的。

我遇到的問題是當我做我的urlread請求，頁面尚未完成加載。我嘗試加載頁面，然後發出一個睡眠命令，然後再次加載，但這也不起作用。

我的代碼是

import urllib.request 
import time 

uf = urllib.request.urlopen(urlname) 
time.sleep(3) 
uf.decode('UTF-8') 
text = uf.read() 
print (text) 

我在看的網頁是http://bookscouter.com/prices.php?isbn=9781111835811（隨意忽略有趣的教材哈哈）

而且我在樹莓派

使用Python 3.X

Answer 1

你想要的價格不在你正在檢索的頁面中，所以沒有任何等待會讓它們出現。相反，在頁面加載後，該頁面的中的JavaScript 將檢索價格。 urllib模塊不是瀏覽器，因此它不會爲您運行該腳本。你需要弄清楚AJAX請求的URL是什麼（快速瀏覽源代碼給出了一個很大的提示），然後檢索它。這可能是JSON格式，所以你可以使用Python的json模塊來解析它。