2012-11-16 126 views
1

我們有一些關於將網絡抓取工具放在一起以收集Twitter上的一些數據的快速問題。使用多個關鍵字抓取Twitter

例如,如果我們想用幾百個user IDs作爲關鍵詞來收集一些必要的推文。但是,似乎我們只能使用有限數量的關鍵字(12?),並且我們可以一次啓動一個爬蟲。

任何提示?

+0

爲什麼你一次不能啓動多個爬蟲?關鍵字限制在哪裏? – Kiril

+0

你到現在爲止做了什麼,你能分享你現在的代碼..?如果用戶看到你的代碼,那麼理解你想要實現的內容會更容易。你也可以添加鏈接到你已經參考的API文檔? –

回答

0

由於Twitter API restrictions (rate limiting)無法抓取整個網站,除非您有很多時間,或者除非您付費才能擁有對twitterhose的特殊訪問權限,這應該是解決您的問題的唯一方法提到