dealsgoround.com和citypockets.com從livingsocial.com和其他每日交易網站訪問用戶帳戶及其每日交易。這些網站要求用戶提供他們的憑據,以便將其登錄到各自的網站,然後導入帳戶詳細信息。 LivingSocial和其他交易網站不提供API訪問用戶帳戶。通過用戶登錄從其他網站導入用戶帳戶數據
我也希望能夠訪問其他網站並從那裏導入數據。但我無法找出dealsgoround.com和citypockets.com從Groupon和LivingSocial等導入數據的後端程序。
現在,我能夠發現可以使用網頁抓取工具/蜘蛛來從網頁中提取數據。但我不確定在需要用戶登錄並且頁面URL加密或至少是動態生成的URL的情況下,Web爬蟲可能很有用。
請幫助我,並建議我一種方法來做到這一點。如果抓取工具是解決此問題的方法,請提供一些可以在我的.net應用程序中使用的網絡抓取工具API的鏈接。
由於
與Atif
請爲你的問題是什麼更清晰。儘量避免提出多個問題。 – Merlin
是的,我之前看過那個,試過了。我能夠發送登錄信息,但之後它正在重新定向,不讓我繼續。 – 2011-11-24 19:02:20