如何使用Python 2從網站上抓取數據？

Question

所以當我運行這段代碼時，我一直得到空括號而不是實際的數據。

我想弄清楚爲什麼我沒有收到任何錯誤消息。

import urllib 
import re 
symbolslist = ["aapl","spy","goog","nflx"] 


for symbol in symbolslist: 
    url = "http://finance.yahoo.com/q?s=%s&ql=1"%(symbol) 
    htmlfile = urllib.urlopen(url) 
    htmltext = htmlfile.read() 
    regex = '<span id="yfs_184_%s">(.+?)</span>'%(symbol.lower()) 
    pattern = re.compile(regex) 
    price = re.findall(pattern, htmltext) 
    print price 

Answer 1

有許多圖書館的周圍，它可以幫助你刮網站。據我所知，看看Scrapy或Beautiful Soup，他們應該支持Python 2和Python 3。

Answer 2

括號出現是因爲正則表達式的元素代碼不是184而是它的一個L不是一個。