JSON是否适合索引大型文件系统?

时间:2015-08-26 18:37:13

标签: python json indexing

手头的任务很简单:所有文件名及其各自的目录都要存储在索引文件中。现在,它是一个纯文本文件(压缩)。我想知道JSON是否适合这项工作。我正在使用Python编写的脚本来执行此操作。它遍历所有目录并以段落格式保存。我也在最后压缩它们。它相当快 - 大约15秒用于索引70,000个文件和7,500个文件夹(包括压缩时间)。索引文件的大​​小约为300 KB

this/is/the/folder
file1.png
file2.txt
file3.dat

another/folder
morefiles.inf
saywhaaa.mov

此索引文件的解析器很简单。每个段落中的第一行是顶部文件夹,其余行是该文件夹中包含的文件名。保持“不破坏,如果没有破坏”政策,我想如果使用JSON可以在这里有任何优势吗?解析数据会更快吗?索引文件的大​​小会增加吗?我不知道任何JSON,但如果能帮助我的话,我会学到它。

0 个答案:

没有答案