寻找用于测试各种尺寸压缩的大文本文件

时间:2017-06-12 06:20:41

标签: compression text-files

我正在寻找大文本文件来测试从1kb到100mb的所有大小的压缩和解压缩。有人可以请我从某个链接下载它吗?

3 个答案:

答案 0 :(得分:2)

您可以从here下载enwik8和enwik9。它们分别是100,000,000和1,000,000,000字节的压缩基准测试文本。您可以随时提取这些子集以进行较小的测试。

答案 1 :(得分:2)

不要忘记语料库的收藏

ERROR in Error encountered resolving symbol values statically. Function calls are not supported. Consider replacing the function or lambda with a reference to an exported function (position 79:31 in the original .ts file), resolving symbol AppModule in c:/Node/boltmotor/src/app/app.module.ts

参见:http://corpus.canterbury.ac.nz/descriptions/

每个集合都有可用文件的下载链接

答案 2 :(得分:1)

***仅适用于Linux用户***

通过运行以下命令,您可以相对轻松地生成任意大小的文本文件:

yes "Some text entry here. This will be on each line..." | head -n 10000000 > bigfile.txt

此命令将生成一个大约1GB的文本文件。通过调整head -n xxxx中的行数,您可以创建具有任意行数的文件。