Question

我们正在考虑将redis用作大型数据集的中间计算结果的缓存系统。例如，我们可能会处理1GB文件并将其转换为512MB数据集，这些数据将流式传输到客户端。问题是，当我们从redis请求数据时，我们不想等到所有512MB都被发送到服务器之后才开始将其发送到客户端。我查看了几个用于redis的c和C ++库（redox，redis3m），甚至异步的库看起来在返回整个结果时给你一个回调，而不是从缓存中返回它的一部分。是否有任何一次给你一个缓冲区的值？

更新：这是我希望得到的一种界面。为清楚起见，简化了示例;

Socket clientSocket;
/* some code that has accepted a connection from a client */
/*  ....... */

RedisClient cl;
cl.Connect("server");
cl.GetValueAsync(
    "largePreCalculated", // key
    [clientSocket](char *buffer, int bytesAvailable) {
         clientSocket.write(buffer, bytesAvailable);
    }, // callback when data from the value has come over the wire
    [clientSocket]() {
         clientSocket.close();
    } // callback when all data from value has been received
);

Answer 1

尝试查看bredis。虽然它不允许您之前通过有线方式收到来自redis的答复（必须对其进行解析，对吗？），但它几乎返回原始（可能是分段的） boost :: asio缓冲区，旨在最大程度地减少内存分配。

PS。 Redis协议（和C ++客户端）支持pipelining，即同时读写套接字。

是否有C或C ++中支持流式读取的redis客户端？

1 个答案: