蜘蛛通過關聯電子郵件的郵件

Question

所以我有一個客戶想要蜘蛛通過他是成員的網站，並收集參與成員的電子郵件。有沒有商業軟件可以這樣做，還是我最好寫一個屏幕抓取腳本？這一切都假設這當然是允許的。

Answer 1

那麼，如果需要登錄，我會推測你可以使用wget來下載網站，然後搜索每個鏡像頁面的電子郵件地址。

當然，這取決於網站是否「可預測」 - 即不是AJAXy。