從其他網站獲取數據

Question

我正在創建一個網站，用於搜索有關它的書籍和其他詳細信息，以便爲其創建數據庫。創建這樣龐大的數據庫會非常緊張，所以人們如何管理這些網站的數據。有沒有簡單的方法？

該網站將像搜索一本書，並顯示有關的細節和在哪裏購買。

Answer 1

一些網站，如亞馬遜允許通過web服務訪問他們的數據庫（即通過SOAP協議等）。通常服務是有限的，或者您必須支付訪問這些服務的費用。

其他網站不提供這樣的事情。獲取數據的唯一方法是屏幕上的其他網頁的數據（例如，只需要請求html頁面並抓取必要的信息）。這是乏味的，如果頁面模板改變，你必須改變你的解析器...更不用說在許多情況下非法...

唯一的另一種方法是手動輸入它或讓你的用戶輸入它。