大文件上的aio_write

时间:2016-12-08 18:52:13

标签: c aio

我试图使用sendfile(2)aio_read(3)以异步方式模仿aio_write(3)的功能。

除了测试大型(> 150k)文件外,一切似乎都运行良好。

我有一个简单的struct io_request我用来跟踪转移:

struct io_request {
    int status;
    struct aiocb *aiocbp;
    int sfd;
};

首先,我构建了aio_read()调用:

struct io_request * ioreq = malloc(sizeof(struct io_request));
ioreq->status = EINPROGRESS;
ioreq->sfd = sfd;

struct aiocb * aiocbreq = malloc(sizeof(struct aiocb));
memset(aiocbreq, 0, sizeof(struct aiocb));

ioreq->aiocbp = aiocbreq;

ioreq->aiocbp->aio_fildes = ffd;

if (ioreq->aiocbp->aio_fildes == -1) {
    perror("aio_fildes");
}

ioreq->aiocbp->aio_buf = malloc(st.st_size);
if (ioreq->aiocbp->aio_buf == NULL) {
    perror("aio_buf malloc");
}

ioreq->aiocbp->aio_nbytes = st.st_size;
ioreq->aiocbp->aio_reqprio = 0;
ioreq->aiocbp->aio_offset = 0;
ioreq->aiocbp->aio_sigevent.sigev_signo = IO_READ_SIGNAL;
ioreq->aiocbp->aio_sigevent.sigev_value.sival_ptr = ioreq;
if (aio_read(ioreq->aiocbp) == -1) {
    perror("aio_read");
}

然后在IO_READ_SIGNAL处理程序中捕获它:

static void
aio_read_handler(int sig, siginfo_t *si, void *ucontext)
{
    if (si->si_code == SI_ASYNCIO) {
        struct io_request *ioreq = si->si_value.sival_ptr;

        // Build the AIO write request
        struct aiocb aiocbreq;
        memset(&aiocbreq, 0, sizeof(struct aiocb));
        aiocbreq.aio_fildes = ioreq->sfd;
        aiocbreq.aio_buf = ioreq->aiocbp->aio_buf;
        aiocbreq.aio_nbytes = ioreq->aiocbp->aio_nbytes;
        aiocbreq.aio_sigevent.sigev_signo = IO_WRITE_SIGNAL;
        aiocbreq.aio_sigevent.sigev_value.sival_ptr = ioreq;

        if (aio_write((void *) &aiocbreq) == -1) {
            perror("aio_write");
        }
    }
}

我可以确认在处理程序内部,即使对于大文件,ioreq->aiocbp->aio_buf的内容也已完整且完整。

稍后,aio_write()将在IO_WRITE_SIGNAL处理程序中捕获:

static void
aio_write_handler(int sig, siginfo_t *si, void *ucontext)
{
    if (si->si_code == SI_ASYNCIO) {
        struct io_request *ioreq = si->si_value.sival_ptr;

        ssize_t bytes_written = aio_return(ioreq->aiocbp);
        printf("Wrote %zu of %zu bytes\n", bytes_written, ioreq->aiocbp->aio_nbytes);
        //free(ioreq->aiocbp);
        //free(ioreq);

        if (aio_error(ioreq->aiocbp) != 0) {
            perror("aio_write_handler");
        }
    }
}

此时aio_write()应该已经完成​​。我检查返回值并采取相应措施。两个调用报告已写入适当的字节数,并且在写入期间没有出现错误。

更大的应用程序是HTTP服务器。我推测这个问题是因为远程客户端无法快速读取以跟上aio_write()。当我执行此sendfile()时,我不得不多次调用sendfile()来完成文件传输。

几个直接问题:

  • 为什么aio_return()aio_error()没有报告任何问题?
  • 如何解决此问题?
  • 有没有办法缓冲aio_write()?我考虑过n_bytes struct aiocbaio_write()传递给aio_write(),而只是从aio_write_handler()内部多次调用fatal error: unexpectedly found nil while unwrapping an Optional value

感谢您的帮助!

1 个答案:

答案 0 :(得分:0)

如果我理解正确,您在aio_return之前使用aio_erroraio_return手册页说明了

  

对于任何给定的请求,此函数只应调用一次           aio_error (3)返回 EINPROGRESS 以外的内容。