StremListener不会在Tweety中返回JSON中的数据

时间:2013-04-23 21:33:14

标签: python json tweepy

我的目标是以json格式从def on_status(self, status):获取数据。 现在我以类似于JSON的方式返回数据,但它不是JSON:

{'favorited': False, 'contributors': None, 'truncated': False, 'text': 'Lol. As long as you and Tsidi are awake, am not sleeping RT @TboyMP: @Fufu_Tinkies hambo lala wena!! LMAO!!', 'source_url': 'http://ubersocial.com', 'in_reply_to_status_id': None, 'user': <tweepy.models.User object at 0x1b4f3d0>, 'filter_level': 'medium', 'geo': None, 'id': 326808604013379586, 'favorite_count': 0, 'source': 'UberSocial for BlackBerry', 'lang': 'en', 'author': <tweepy.models.User object at 0x1b4f3d0>, 'created_at': datetime.datetime(2013, 4, 23, 21, 23, 37), 'retweeted': False, 'coordinates': None, 'in_reply_to_user_id_str': None, 'entities': {'symbols': [], 'user_mentions': [{'id': 282499717, 'indices': [60, 67], 'id_str': '282499717', 'screen_name': 'TboyMP', 'name': 'Thulane Khanye'}, {'id': 157961325, 'indices': [69, 82], 'id_str': '157961325', 'screen_name': 'Fufu_Tinkies', 'name': 'Nomfundo'}], 'hashtags': [], 'urls': []}, 'in_reply_to_status_id_str': None, 'in_reply_to_screen_name': None, 'id_str': '326808604013379586', 'place': None, 'retweet_count': 0, 'in_reply_to_user_id': None}

正如您所看到的,它使用单引号而不是双引号。我得到这个的方式是:

data = status.__getstate__()

但是我不能使用json模块load:它给了我一个错误:

Encountered Exception: expected string or buffer

那么如何从JSON中删除数据或将其转换为JSON?

更新

我希望有这样的东西:

>>> data = '[{"fooo":"bar","something":"another bar"}]'
>>> ww = json.loads(data)
>>> ww[0]['fooo']
u'bar'

我希望通过tweepy数据以我的方式获得帮助.... 谢谢。

2 个答案:

答案 0 :(得分:4)

这会将原始json数据从def on_status(self, status):写入文件。

此解决方案取自here以将原始json数据添加到状态对象,并here作为框架代码使用tweepy的流功能。

@classmethod                    
def parse(cls, api, raw):
        status = cls.first_parse(api, raw)
        setattr(status, 'json', json.dumps(raw))
        return status

tweepy.models.Status.first_parse = tweepy.models.Status.parse
tweepy.models.Status.parse = parse

_dir = os.path.dirname(os.path.abspath(__file__))

class CustomStreamListener(tweepy.StreamListener):
    def on_status(self, status):
        print status.user.screen_name
        with codecs.open(os.path.join(_dir, 'tweets.json'), "a", 'utf-8') as textFile:
                textFile.write(status.json)
                textFile.write('\n')

    def on_error(self, status_code):
        print >> sys.stderr, 'Encountered error with status code:', status_code
        return True # Don't kill the stream

    def on_timeout(self):
        print >> sys.stderr, 'Timeout...'
        return True # Don't kill the stream

我没有Python专家,但似乎正在进行的是解析方法正在使用新版本进行热修补,然后将新版本安装到tweepy类层次结构中。新版本调用旧版本,然后将json插槽附加到从原始解析方法返回的对象。

答案 1 :(得分:1)

您拥有的是Python词典,要将其转换为使用json.dumps()的JSON:

import json
json_data = json.dumps(data)