使用Python腳本獲取標題標籤的內容

Question

我想在Python中製作一個真正的腳本，它從指定網頁的標題標籤獲取內容，然後將它們放入MySQL數據庫。

我非常（並且我的意思是）很少有Python的經驗，但是這需要爲我的項目完成。我怎樣才能以最簡單的方式做到這一點？

我希望你能明白我想問什麼。

Answer 1

1. 研究urllib2看看如何下載網頁。
2. 研究BeautifulSoup解析HTML並拉出標題。
3. 研究Python Database API Specification將行插入到 MySQL數據庫中。

---

下面是一些示例代碼，您開始：

import urllib2 
import BeautifulSoup 
import MySQLdb 

f = urllib2.urlopen('http://www.python.org/') 
soup=BeautifulSoup.BeautifulSoup(f.read()) 
title=soup.find('title') 
print(title.string) 

connection=MySQLdb.connect(
    host='HOST',user='USER', 
    passwd='PASS',db='MYDB') 
cursor=connection.cursor() 

sql='''CREATE TABLE IF NOT EXISTS foo (
      fooid int(11) NOT NULL AUTO_INCREMENT, 
      title varchar(100) NOT NULL, 
      PRIMARY KEY (fooid) 
     )''' 
cursor.execute(sql) 

sql='INSERT INTO foo (title) VALUES (%s)' 
args=[title.string] 
cursor.execute(sql,args) 
cursor.close() 
connection.close() 

Answer 2

使用urllib2打開網頁。然後使用正則表達式解析返回的文本以檢索標題。