C ++将N个字节从一个流复制到另一个流

时间:2017-01-12 10:36:20

标签: c++ io fstream

ifstream作为源并将ofstream作为目标,从源代码中streampos(offset)开始复制N个字节的最快方法是什么?

修改

我想到的最简单的方法是使用简单的缓冲区:

char *buf = new char[N];
is.seekg(offset);
is.read(buf, N);
os.write(buf, N);
delete buf;

或固定大小的较小缓冲区:

char buf[BUF_SIZE];
is.seekg(offset);
while (N > 0) {
    int n = min(BUF_SIZE, N);
    is.read(buf, n);
    os.write(buf, n);
    N -= n;
}

我想知道什么比这更快或更有效。

1 个答案:

答案 0 :(得分:0)

您可以尝试不同的解决方案。关于效率最重要的事情 - 衡量

您可以在此处查找示例实现:How to read a file into a vector elegantly and efficiently?

在大多数情况下,缓冲区越大,读/写速度越快。使用迭代器解决方案传递单个字节,例如:

std::copy(std::istream_iterator<char>(is),
          std::istream_iterator<char>(),
          std::ostream_iterator<char>(os));

虽然看起来不错,但在效率方面却是最糟糕的情况 - 至少在我测试过的设置方面。

从指定的偏移量一次读取整个文件到一个大的缓冲区可以得到最佳的时间结果 - 除非你有一些内存限制,否则你可以试试这个。为此,您应该计算文件大小,将数据读取到缓冲区(例如,如下所示初始化:std::vector<char> buff(fileSize, 0))并在一次调用时将其写入输出流。

由于您只想复制N个字节,因此您应该将该值与文件大小减去起始偏移量进行比较,以便能够在一个大的读/写中进行比较。

例如:

// helper function
streampos getSizeToEnd(ifstream& is)
{
    auto currentPosition = is.tellg();
    is.seekg(0, is.end);
    auto length = is.tellg() - currentPosition;
    is.seekg(currentPosition, is.beg);
    return length;
}

int main()
{
    std::ifstream is;
    std::ofstream os;
    ...
    const auto offset = 100;
    is.seekg(offset);
    std::vector<char> buff(getSizeToEnd(is), 0);

    // read the data chunk to buffer and from buffer to output stream
    is.read(buff.data(), buff.size());
    os.write(buff.data(), buff.size());
    ...
}