如何從網站上抓取數據

Question

我正在構建一個圖像數據庫，並希望自動化該過程。我對HTML有些熟悉，而我的核心程序是用C＃構建的。什麼是一個好的圖書館可以幫助我下載一個頁面作爲HTML，並獲取頁面上的URL鏈接到所需的圖像？我很熟悉如何從URL下載圖像，因此不需要解決。

（庫或其他語言，數據庫建設和程序不需要進行組合。）

Answer 1

你想建立一個履帶或網站蜘蛛將搶東西的網站。有一個解析庫叫HtmlAgilityPack這將幫助你做到這一點很容易。 This post will tell you how to use this library.

希望它有幫助！