從網站上刮掉java腳本

-4

我試圖從這個網頁中用Python 2刮掉https://www.mmoga.co.uk/FIFA-Coins/FUT-Coins-Xbox-One,FIFA-15/。我需要刮的數據表示如下從網站上刮掉java腳本

<a href="/FIFA-Coins/FUT-Coins-Xbox-One,FIFA-15,70000-FIFA-15-Xbox-One-Ultimate-Team-Coins/" class="smallBoldText" style="text-decoration:none;" title="70.000 FIFA 15 Xbox One Ultimate Team Coins">

我需要檢索標題的內容。我曾嘗試下面的代碼，但是這似乎並沒有工作

i=0 
while i< len(titles): 
    htmltext = urllib.urlopen("https://www.mmoga.com/FIFA-Coins/FUT-Coins-Xbox-One,FIFA-15/") 
    data = json.load(htmltext) 
    mmogaamount.append(data["title"]) 
    print mmogaamount 
    i+=1

來源

2015-02-17 andy

這與JavaScript有什麼關係？ – MattDMo 2015-02-17 23:23:33

json.load只加載json數據 - 你在這裏處理HTML。要麼學會使用常規密碼，要麼查看「BeautifulSoup」，它是一個用於抓取HTML的Python庫。 – sol 2015-02-17 23:22:50

這將讓你開始：

import requests 
from bs4 import BeautifulSoup 


# get html 
content = requests.get("https://www.mmoga.co.uk/FIFA-Coins/FUT-Coins-Xbox-One,FIFA-15/").content 
# pass html to beautifulSoup 
soup = BeautifulSoup(content) 
# find tr tag we want based on the class 
tr = soup.body.find("tr",attrs={"class":"row1"}) 
# extract the titles from the "smallBoldText" class 
print([x["title"] for x in tr.find_all(attrs={"class":"smallBoldText"}) if x.has_attr("title")]) 
['70.000 FIFA 15 Xbox One Ultimate Team Coins']

我建議檢查出bs4 docs，有多個教程是非常容易跟隨。

來源

2015-02-17 23:27:36

從網站上刮掉java腳本

回答

相關問題