如何将数据附加到json文件?

时间:2012-10-21 02:35:37

标签: python json

我正在尝试创建一个将条目添加到json文件的函数。最终,我想要一个看起来像

的文件
[{"name" = "name1", "url" = "url1"}, {"name" = "name2", "url" = "url2"}]

等。这就是我所拥有的:

def add(args):
    with open(DATA_FILENAME, mode='r', encoding='utf-8') as feedsjson:
        feeds = json.load(feedsjson)
    with open(DATA_FILENAME, mode='w', encoding='utf-8') as feedsjson:
        entry = {}
        entry['name'] = args.name
        entry['url'] = args.url
        json.dump(entry, feedsjson)

这会创建一个条目,例如{"name"="some name", "url"="some url"}。但是,如果我再次使用此add函数,使用不同的名称和URL,则第一个被覆盖。我需要做些什么才能将第二个(第三个......)条目附加到第一个?

编辑:这个问题的第一个答案和评论指出了一个显而易见的事实,即我没有在写入块中使用feeds。不过,我不知道该怎么做。例如,以下显然不会这样做:

with open(DATA_FILENAME, mode='a+', encoding='utf-8') as feedsjson:
    feeds = json.load(feedsjson)
    entry = {}
    entry['name'] = args.name
    entry['url'] = args.url
    json.dump(entry, feeds)

11 个答案:

答案 0 :(得分:30)

您可能希望使用JSON 列表而不是字典作为顶层元素。

因此,使用空列表初始化文件:

with open(DATA_FILENAME, mode='w', encoding='utf-8') as f:
    json.dump([], f)

然后,您可以新条目追加到此列表中:

with open(DATA_FILENAME, mode='w', encoding='utf-8') as feedsjson:
    entry = {'name': args.name, 'url': args.url}
    feeds.append(entry)
    json.dump(feeds, feedsjson)

请注意,执行起来会很慢,因为每次调用add时都会重写文件的全部内容。如果您在循环中调用它,请考虑提前将所有订阅源添加到列表中,然后一次性写出列表。

答案 1 :(得分:30)

json可能不是磁盘格式的最佳选择;添加数据时遇到的麻烦就是一个很好的例子。具体来说,json对象的语法意味着必须读取和解析整个对象才能理解它的任何部分。

幸运的是,还有很多其他选择。一个特别简单的是CSV;这是由python的标准库支持的。最大的缺点是它只适用于文本;如果需要,它需要程序员采取额外的动作将值转换为数字或其他格式。

另一个没有此限制的选项是使用sqlite数据库,该数据库在python中也有内置支持。这可能与您已有的代码有较大的不同,但它更自然地支持您正在尝试构建的“修改一点”模型。

答案 2 :(得分:11)

如果文件存在,则将条目附加到文件内容,否则将条目附加到空列表并写入文件:

a = []
if not os.path.isfile(fname):
    a.append(entry)
    with open(fname, mode='w') as f:
        f.write(json.dumps(a, indent=2))
else:
    with open(fname) as feedsjson:
        feeds = json.load(feedsjson)

    feeds.append(entry)
    with open(fname, mode='w') as f:
        f.write(json.dumps(feeds, indent=2))

答案 3 :(得分:7)

一种可能的解决方案是手动连接,这里有一些用处 代码:

import json
def append_to_json(_dict,path): 
    with open(path, 'ab+') as f:
        f.seek(0,2)                                #Go to the end of file    
        if f.tell() == 0 :                         #Check if file is empty
            f.write(json.dumps([_dict]).encode())  #If empty, write an array
        else :
            f.seek(-1,2)           
            f.truncate()                           #Remove the last character, open the array
            f.write(' , '.encode())                #Write the separator
            f.write(json.dumps(_dict).encode())    #Dump the dictionary
            f.write(']'.encode())                  #Close the array

在脚本之外编辑文件时应该小心,不要在末尾添加任何间距。

答案 4 :(得分:5)

使用a代替w可让您更新文件,而不是创建新文件/覆盖现有文件中的所有内容。

有关模式的不同,请参阅this answer

答案 5 :(得分:2)

您不会写任何与您所读数据有关的内容。您是否希望将Feed中的数据结构添加到您正在创建的新数据中?

或许您想要以附加模式open(filename, 'a')打开文件,然后通过编写由json.dumps生成的字符串而不是使用json.dump来添加您的字符串 - 但nneonneo指出这将是无效的json。

答案 6 :(得分:1)

import jsonlines

object1 = {
               "name": "name1",
               "url": "url1"
          }

object2 = {
               "name": "name2",
               "url": "url2"
          }   


# filename.jsonl is the name of the file
with jsonlines.open("filename.jsonl", "a") as writer:   # for writing
    writer.write(object1)
    writer.write(object2)

with jsonlines.open('filename.jsonl') as reader:      # for reading
    for obj in reader:
        print(obj)             

访问以了解更多信息https://jsonlines.readthedocs.io/en/latest/

答案 7 :(得分:0)

我有一些类似的代码,但是每次都不会重写全部内容。这旨在定期运行,并在数组末尾附加JSON条目。

如果该文件尚不存在,它将创建该文件并将JSON转储到数组中。如果文件已经创建,则结束,将]替换为,,放入新的JSON对象,然后再次使用另一个]将其关闭>

# Append JSON object to output file JSON array
fname = "somefile.txt"
if os.path.isfile(fname):
    # File exists
    with open(fname, 'a+') as outfile:
        outfile.seek(-1, os.SEEK_END)
        outfile.truncate()
        outfile.write(',')
        json.dump(data_dict, outfile)
        outfile.write(']')
else: 
    # Create file
    with open(fname, 'w') as outfile:
        array = []
        array.append(data_dict)
        json.dump(array, outfile)

答案 8 :(得分:0)

enter link description here

也许您可以检查出这个问题。在列表中添加新数据更加容易,而且不会破坏JSON格式。

答案 9 :(得分:0)

这个,为我工作:

with open('file.json', 'a') as outfile:
    outfile.write(json.dumps(data))
    outfile.write(",")
    outfile.close()

答案 10 :(得分:0)

您可以简单地从源文件中导入数据,进行读取,然后将要追加的内容保存到变量中。然后打开目标文件,将列表中的数据分配给新变量(大概都是有效的JSON),然后在此列表变量上使用“附加”功能并将第一个变量附加到该变量中。 Viola,您已附加到JSON列表。现在,只需使用新添加的列表(如JSON)覆盖目标文件即可。

“打开”功能中的“ a”模式在这里不起作用,因为它将仅将所有内容粘贴到文件的末尾,这将使其变为无效的JSON格式。