Ijson从列表中解析

Question

我有一个列表，其中每个项目都包含JSON数据，因此我尝试使用Ijson解析数据，因为数据加载会很大。

这就是我想要实现的目标：

article_data=#variable which contains the list
parser = ijson.parse(article_data)
for id in ijson.items(parser, 'item'):
    if(id['article_type'] != "Monthly Briefing" and id['article_type']!="Conference"):
        data_article_id.append(id['article_id'])
        data_article_short_desc.append(id['short_desc'])
        data_article_long_desc.append(id['long_desc'])

这是我得到的错误：

  

AttributeError：＆＃39; generator＆＃39;对象没有属性＆＃39;读＆＃39;

我想将list转换为string，然后尝试解析Ijson，但它失败并给了我同样的错误。

有什么建议吗？

data_article_id=[] 
data_article_short_desc=[] 
data_article_long_desc=[] 

for index in article_data: 
    parser = ijson.parse(index)
    for id in ijson.items(parser, 'item'):
        if(id['article_type'] != "Monthly Briefing" and id['article_type']!="Conference"):
            data_article_id.append(id['article_id'])
            data_article_short_desc.append(id['short_desc'])
            data_article_long_desc.append(id['long_desc'])

因为它在列表中，我也尝试了这个..但它给了我同样的错误。

＆＃39;发电机＆＃39;对象没有属性＆＃39;读＆＃39;

Answer 1

我假设您有一个要解析的字节串json对象列表。

ijson.items（JSON，prefix）将可读字节对​​象作为输入。也就是说它需要一个打开的文件或类似文件的对象作为输入。具体来说，输入应该是字节文件类对象。

如果您使用的是Python 3，则可以使用io模块 io.BytesIO创建内存中的二进制流。

实施例

假设输入为[b'{“id”：“ab”}'，b'{“id”：“cd”}']

list_json = [b'{"id": "ab"}', b'{"id": "cd"}']
for json in list_json:
    item = ijson.items(io.BytesIO(json), "")
    for i in item:
        print(i['id'])
Output: 
    ab
    cd