如何快速创建具有“自然”内容的大型（>1GB）文本+二进制文件？（C#）

为了测试压缩性能，我需要能够创建大文件，最好包括文本、二进制和混合格式的文件。

• 文件内容既不应完全是随机的，也不应完全是均匀的。

  全零的二进制文件不行。完全随机的二进制文件也不行。对于文本文件，完全随机的ASCII序列也不行-文本文件应该包含模拟自然语言或源代码（XML、C#等）的模式和频率。伪真实文本。

• 每个单独文件的大小并不重要，但是对于文件集合而言，我需要总共大约8GB。
• 我希望将文件数量保持在可管理的水平，比如o(10)。

对于创建二进制文件，我可以使用大缓冲区，然后循环使用System.Random.NextBytes和FileStream.Write，像这样：

Int64 bytesRemaining = size;
byte[] buffer = new byte[sz];
using (Stream fileStream = new FileStream(Filename, FileMode.Create, FileAccess.Write))
{
    while (bytesRemaining > 0)
    {
        int sizeOfChunkToWrite = (bytesRemaining > buffer.Length) ? buffer.Length : (int)bytesRemaining;
        if (!zeroes) _rnd.NextBytes(buffer);
        fileStream.Write(buffer, 0, sizeOfChunkToWrite);
        bytesRemaining -= sizeOfChunkToWrite;
    }
    fileStream.Close();
}

使用足够大的缓冲区，比如512k，即使对于超过2或3GB的文件，速度也相对较快。但是内容完全是随机的，这不是我想要的。

对于文本文件，我采取的方法是使用Lorem Ipsum，然后通过StreamWriter重复将其写入文本文件中。内容是非随机和非均匀的，但是它包含许多相同的重复块，这是不自然的。此外，由于Lorem Ipsum块非常小（<1k），所以需要许多循环和非常长的时间。

这两种方法都不太令我满意。

我看到了Quickly create large file on a windows system?的答案。这些方法非常快，但我认为它们只是用零或随机数据填充文件，都不是我想要的。如果必要，我可以运行像contig或fsutil这样的外部进程。

测试在Windows上运行。

与其创建新文件，使用已经存在于文件系统中的文件是否更有意义？我不知道是否有足够大的文件。

如果从一个现有文件开始（比如文本文件的c:\windows\Microsoft.NET\Framework\v2.0.50727\Config\enterprisesec.config.cch），然后多次复制其内容会怎样？这适用于文本文件或二进制文件。

目前我有一个基本可行但运行时间过长的方法。

是否有其他人解决了这个问题？

有没有比通过StreamWriter更快的写入文本文件的方法？

有什么建议吗？

编辑：我喜欢使用马尔可夫链来生成更自然的文本。不过还需要解决速度的问题。