如何從Twitter搜索或使用Twython的流式API獲取超過100條推文

如何使用Twython檢索例如在紐約說「#Accounting」的所有推文？如何從Twitter搜索或使用Twython的流式API獲取超過100條推文

我使用Twitter搜索API，但我只能獲得100條推文。

然後我嘗試使用Twitter流式過濾器API，但無法通過地理定位縮小範圍，而且似乎需要永久使用。我讀過，我們應該把所有這些推文放到一個數據庫中，然後在那裏做聚合，但我想知道是否有其他方法可以快速做某件事。

這裏是我的代碼：

from twython import Twython 

TWITTER_APP_KEY = 'XXXX' 
TWITTER_APP_KEY_SECRET = 'XXXX' 
TWITTER_ACCESS_TOKEN = 'XXXX' 
TWITTER_ACCESS_TOKEN_SECRET = 'XXXX' 

t = Twython(app_key=TWITTER_APP_KEY, 
      app_secret=TWITTER_APP_KEY_SECRET, 
      oauth_token=TWITTER_ACCESS_TOKEN, 
      oauth_token_secret=TWITTER_ACCESS_TOKEN_SECRET) 

search = t.search(q='#Accounting', 
        geocode='-74,40,-73,41', 
        since_id='1', 
        max_id='504082008759488512' 
       ) 

tweets = search['statuses'] 
count=0 
for tweet in tweets: 
    count+=1 
    print tweet['id_str'], '\n', tweet['text'], '\n\n\n' 

print count

這裏是我的流API代碼：

from twython import TwythonStreamer 
APP_KEY = 'XXXX' 
APP_SECRET = 'XXXX' 
OAUTH_TOKEN = 'XXXX' 
OAUTH_TOKEN_SECRET = 'XXXX' 

class MyStreamer(TwythonStreamer): 
    tweets=[] 
    def on_success(self, data): 
    if 'text' in data: 
     tweet= data['text'].encode('utf-8') 
     if 'Accounting' in tweet: 
      tweets.append(tweet) 
      print tweet 

    def on_error(self, status_code, data): 
    print status_code 
    self.disconnect() 

stream = MyStreamer(APP_KEY, APP_SECRET, 
        OAUTH_TOKEN, OAUTH_TOKEN_SECRET) 

stream.statuses.filter(location=['-74,40,-73,41'])

感謝

來源

2014-05-11 jxn