Skip to main content
 首页 » 编程设计

python之来自搜索 api 的推文是否重叠

2025年05月04日11me-sa

我是 twitter api 的新手,想知道我是否使用搜索 api,我想每分钟调用一次,以检索大约 1000 条推文。如果针对给定标准创建的推文少于 1000 条,我是否会收到重复的推文,或者我会更频繁地每分钟调用一次

我希望我的问题很清楚,以防万一我使用 python-twitter 库。 我获取推文的方式是:

self.api = twitter.Api(consumer_key, consumer_secret ,access_key, access_secret) 
self.api.VerifyCredentials() 
self.api.GetSearch(self.hashtag, per_page=100) 

请您参考如下方法:

您的搜索结果会重叠,因为 API 不知道您之前搜索过什么。防止重叠的一种方法是使用来自上次检索的推文的推文 ID。这是我的代码中的 python 2.7 片段:

maxid = 10000000000000000000 
for i in range(0,10): 
    with open('output.json','a') as outfile:  
        time.sleep(5) # don't piss off twitter 
        print 'maxid=',maxid,', twitter loop',i 
        results = api.GetSearch('search_term', count=100,max_id = maxid) 
        for tweet in results: 
            tweet = str(tweet).replace('\n',' ').replace('\r',' ') # remove new lines 
            tweet = (json.loads(tweet)) 
            maxid = tweet['id'] # redefine maxid 
            json.dump(tweet,outfile) 
            outfile.write('\n') #print tweets on new lines 

此代码为您提供自上次 id 以来 100 条推文的 10 次循环,每次循环都定义该 id。然后它会写入一个 json 文件(每行一条推文)。我使用此代码搜索最近的过去,但您可以通过将“max_id”更改为“since_id”来调整它以使其具有非重叠推文。