是否可以通過Python進行HTML抓取，數據挖掘？

Question

我可以收集智能數據，HTML使用python刮？我不知道它，所以我想想一些想法。

Answer 1

看着模塊scrapy：

http://scrapy.org/

Answer 2

嘗試使用的urllib2和美味的湯。

的urllib2是請求的URL編程有用的。這是標準庫的一部分：http://docs.python.org/library/urllib2

美麗的湯是很好的挖掘HTML/XML，並可以在這裏找到：http://pypi.python.org/pypi/BeautifulSoup

Answer 3

你當然可以 - 我在Python開發this library我的網頁抓取工作。

一個很好的解析庫是lxml。

如果你是新來的Python你可能想通過this ebook工作第一。

Answer 4

您也可以使用htql庫在：http://htql.net。