Tweepy Recherche w/While Loop

Question

Cela me rend fou. Comme vous pouvez le voir ci-dessous, je suis en essayant pour utiliser une simple boucle while pour effectuer quelques recherches tweepy et les ajouter dans une trame de données. Pour une raison quelconque cependant, après avoir tiré le premier ensemble de 100 tweets, il répète simplement cet ensemble au lieu d'effectuer une nouvelle recherche. Tout avis serait grandement apprécié.

import sys 
import csv 
import pandas as pd 
import tweepy 
from tweepy import OAuthHandler 

consumer_key = '' 
consumer_secret = '' 
access_token = '' 
access_secret = '' 

auth = OAuthHandler(consumer_key, consumer_secret) 
auth.set_access_token(access_token, access_secret) 

api = tweepy.API(auth) 

num_results = 200 
result_count = 0 
last_id = None 
df = pd.DataFrame(columns=['Name', 'Location', 'Followers', 'Text', 'Coorinates']) 

while result_count < num_results: 
    result = api.search(q='',count=100, geocode= "38.996918,-104.995826,190mi", since_id = last_id) 
    for tweet in result: 
     user = tweet.user 
     last_id = tweet.id_str 
     name = user.name 
     friends = user.friends_count 
     followers = user.followers_count 
     text = tweet.text.encode('utf-8') 
     location = user.location 
     coordinates = tweet.coordinates 
     df.loc[result_count] = pd.Series({'Name':name, 'Location':location, 'Followers':followers, 'Text':text, 'Coordinates':coordinates}) 
     print(text) 
     result_count += 1 

# Save to Excel 
print("Writing all tables to Excel...") 
df.to_csv('out.csv') 
print("Excel Export Complete.") 

Answer 1

La méthode API.search renvoie les tweets correspondant à une requête spécifiée. Ce n'est pas un APi Streaming, donc il retourne toutes les données à la fois.
En outre, dans vos paramètres de requête, vous avez ajouté count, qui spécifie le nombre d'états à extraire.

Donc le problème est qu'avec votre requête vous retournez les 100 premières données de l'ensemble complet pour chaque itération.

Je vous suggère de changer le code dans quelque chose comme ça

result = api.search(q='', geocode= "38.996918,-104.995826,190mi", since_id = last_id) 
for tweet in result: 
    user = tweet.user 
    last_id = tweet.id_str 
    name = user.name 
    friends = user.friends_count 
    followers = user.followers_count 
    text = tweet.text.encode('utf-8') 
    location = user.location 
    coordinates = tweet.coordinates 
    df.loc[result_count] = pd.Series({'Name':name, 'Location':location, 'Followers':followers, 'Text':text, 'Coordinates':coordinates}) 
    print(text) 

Laissez-moi savoir.