我使用tweepy根据第一个答案的代码,用tweepy搜刮了推文。这个问题,其内容如下
consumer_key = ""
consumer_secret = ""
access_token = ""
access_token_secret = ""
import tweepy
auth = tweepy.OAuthHandler(consumer_key, consumer_secret)
auth.set_access_token(access_token, access_token_secret)
api = tweepy.API(auth,wait_on_rate_limit=True)
query = 'kubernetes'
max_tweets = 200
searched_tweets = []
last_id = -1
while len(searched_tweets) < max_tweets:
count = max_tweets - len(searched_tweets)
try:
new_tweets = api.search(q=query, count=count, max_id=str(last_id - 1))
if not new_tweets:
break
searched_tweets.extend(new_tweets)
last_id = new_tweets[-1].id
except tweepy.TweepError as e:
break
它提供了一个json对象的列表,如 searched_tweets[2]
输出
Status(_api=<tweepy.api.API object at 0x7fc13dbab828>, _json={'created_at': 'Wed Jun 10 14:06:51 +0000 2020', 'id': 1270719075388280834, 'id_str': '1270719075388280834', 'text': "RT @CDWGWAGov: According to @IBM's new CEO, #hybridcloud & #AI are the two dominant forces driving #digitaltransformation #Kubernetes #IoT…", 'truncated': False,
我需要的是创建日期和微博文字,所以我用下面的代码来提取它们。
for tweet in searched_tweets:
new_tweet = json.dumps(tweet)
dct = json.loads(new_tweet._json)
created_at=dct['created_at']
txt=dct['text']
但它是给
TypeError: Object of type 'Status' is not JSON serializable
我试过了 这个 解决这个错误的方法是 api = tweepy.API(auth, parser=tweepy.parsers.JSONParser())
它给 KeyError: -1
我在stackoverflow上几乎尝试了所有其他的解决方案,但没有任何工作给我。谁能帮我解压json并得到这两个值?谢谢你的帮助
该 Status
tweepy对象本身是不可序列化的,但它有一个 _json
属性可以是JSON序列化
比如说
status_list = api.user_timeline(user_handler)
status = status_list[0]
json_str = json.dumps(status._json)
我怀疑该错误是由这行引起的new_tweet = json.dumps(tweet)
在这里,所以只需调用 _json
此线
new_tweet = json.dumps(tweet._json)
并修改相关的后续代码。这应该可以解决你的问题