寻找用于测试各种尺寸压缩的大文本文件

Question

我正在寻找大文本文件来测试从1kb到100mb的所有大小的压缩和解压缩。有人可以请我从某个链接下载它吗？

Answer 1

您可以从here下载enwik8和enwik9。它们分别是100,000,000和1,000,000,000字节的压缩基准测试文本。您可以随时提取这些子集以进行较小的测试。

Answer 2

不要忘记语料库的收藏

ERROR in Error encountered resolving symbol values statically. Function calls are not supported. Consider replacing the function or lambda with a reference to an exported function (position 79:31 in the original .ts file), resolving symbol AppModule in c:/Node/boltmotor/src/app/app.module.ts

参见：http://corpus.canterbury.ac.nz/descriptions/

每个集合都有可用文件的下载链接

Answer 3

***仅适用于Linux用户***

通过运行以下命令，您可以相对轻松地生成任意大小的文本文件：

yes "Some text entry here. This will be on each line..." | head -n 10000000 > bigfile.txt

此命令将生成一个大约1GB的文本文件。通过调整head -n xxxx中的行数，您可以创建具有任意行数的文件。