網站搜索和刮012

Question

我爲商務旅行和頻繁的kayak.com旅行，讓我想到了皮艇如何完成所有這些網站的搜索和刮取。

我可以理解從加載的HTML頁面獲取數據，但他們如何完成Expedia的後端搜索，例如最終用戶看到Expedia的網站？

Answer 1

我已經構建了像這樣的數十個元搜索。有幾個選項：

1. 成爲子公司：通常一個網站會給你一個API，你可以提交搜索，並迅速得到一個迴應。大多數情況下，您會爲推薦提供一點回饋。
2. 刮目標網站：可能性是你不想嘗試獲取航空公司未來的整個行程，所以這裏最好的計劃是制定一個例行程序，將用戶的搜索，將其提供給網站，並取回結果。您的前端需要處理異步結果或計劃讓用戶等待很長時間。

Answer 2

實際上取決於您的SQL的聯盟營銷渠道結果不是一個好主意。我會找到一種方法在您的最後批量插入數據，並在數據提要結果周圍構建搜索引擎。你對別人的依賴會影響你的建築物的質量。

也想到它就像CAR一樣，你添加的選項越多，打破的就越多。

結帳Avoli.com。