C ++ read() - 从套接字到ofstream

时间:2012-06-26 21:23:15

标签: c++ c sockets

是否有一种C / C ++方法使用read()从套接字读取数据,并且接收缓冲区是文件(ofstream)或类似的自扩展对象(例如矢量)?

编辑:当我考虑如何读取可能接收10000+字节文件内容的流套接字时出现了这个问题。我从来没有像把20000或50000字节(现在足够大)放在堆栈上作为缓冲区,文件可以临时存储,直到我可以插入文件。为什么不直接将其直接流式传输到文件中以加注星标。

就像你可以在std:string里面的char *那样,我想到了像

这样的东西
read( int fd, outFile.front(), std::npos );  // npos = INT_MAX

或类似的东西。

结束修改

感谢。

2 个答案:

答案 0 :(得分:4)

这很简单,而且不在我的手指之上,但我认为沿着这些方向会有一些结果:

template <unsigned BUF_SIZE>
struct Buffer {
    char buf_[BUF_SIZE];
    int len_;
    Buffer () : buf_(), len_(0) {}
    int read (int fd) {
        int r = read(fd, buf_ + len_, BUF_SIZE - len_);
        if (r > 0) len_ += r;
        return r;
    }
    int capacity () const { return BUF_SIZE - len_; }
}

template <unsigned BUF_SIZE>
struct BufferStream {
    typedef std::unique_ptr< Buffer<BUF_SIZE> > BufferPtr;
    std::vector<BufferPtr> stream_;
    BufferStream () : stream_(1, BufferPtr(new Buffer<BUF_SIZE>)) {}
    int read (int fd) {
        if ((*stream_.rbegin())->capacity() == 0)
            stream_.push_back(BufferPtr(new Buffer<BUF_SIZE>));
        return (*stream_.rbegin())->read(fd);
    }
};

在评论中,你提到你想避免创建一个大的char缓冲区。使用read系统调用时,执行一些大型读取而不是许多小型读取通常更有效。因此,大多数实现将选择大输入缓冲区来获得该效率。你可以实现类似的东西:

std::vector<char> input;
char in;
int r;
while ((r = read(fd, &in, 1)) == 1) input.push_back(in);

但这将涉及系统调用,并且每个输入字节至少复制一个字节。相反,我提出的代码避免了额外的数据副本。

我真的不希望我提出的代码是您采用的解决方案。我只想向您提供如何创建一个空间和时间效率相当高的自扩展对象的说明。根据您的目的,您可能希望扩展它,或编写自己的。在我的头脑中,一些改进可能是:

  • 使用std::list代替,以避免向量调整大小
  • 允许API参数指定要读取的字节数
  • 使用readv始终允许一次读取至少BUF_SIZE个字节(或超过BUF_SIZE个字节)

答案 1 :(得分:0)

查看boost::asio中的流支持。