使用connect-busboy配置Nginx以进行文件上载

时间:2016-12-31 02:15:03

标签: node.js nginx file-upload busboy

我在NodeJS中有一个API可以上传文件,我在服务器端使用connect-busboy包接收它。

因此,例如,以下是处理请求的代码的一部分:

var app = require('express')();
var busboy = require('connect-busboy');

app.use(busboy({
        highWaterMark: 2 * 1024 * 1024,
        limits: {
            fileSize: 1024 * 1024 * 1024 // 1 GB
        },
        immediate: true
    }));

var busboyHandler = function (req, res) {
    if (req.busboy) {
        req.busboy.on('file', function(fieldname, file, filename, encoding, mimetype) {
            console.log('received file ', req.path, fieldname, file, filename, encoding, mimetype);
        });

        req.busboy.on('field', function(key, value, keyTruncated, valueTruncated) {
            console.log('field..', key, value, keyTruncated, valueTruncated);
        });

        req.busboy.on('finish', function() {
            console.log('busboy finished');
        });
    }
};

app.post('api/documents/files', busboyHandler); 

当我使用npm start启动API并将文件直接上传到此API时,这很有效,但是,当我配置Nginx Docker时,它适用于非常小的文件,但对于大多数文件,它们不会t成功上传。

以下是我的nginx.conf文件的摘录:

user nobody nogroup;
worker_processes auto;          # auto-detect number of logical CPU cores

events {
  worker_connections 512;       # set the max number of simultaneous connections (per worker process)
}

http {
  include mime.types;

  client_max_body_size 100M;
  client_body_buffer_size 256k;

  upstream api_doc {
    server 192.168.2.16:4956;
  }

  server {
    listen *:4000;                # Listen for incoming connections from any interface on port 80
    server_name localhost;             # Don't worry if "Host" HTTP Header is empty or not set
    root /usr/share/nginx/html; # serve static files from here

    client_max_body_size 100M;
    client_body_buffer_size 256k;

    location /api/documents {
        proxy_pass http://api_doc;
        proxy_http_version 1.1;
        proxy_set_header Upgrade $http_upgrade;
        proxy_set_header Connection 'upgrade';
        proxy_set_header Host $host;
        proxy_cache_bypass $http_upgrade;
     }
  }

}

我看到received file日志,但是当它在Nginx下时,永远不会有busboy finished日志,这与在没有Nginx的情况下直接调用API不同。

我尝试更改这些Nginx配置,但它不起作用:client_max_body_sizeclient_body_buffer_size。在我看来,API只接收大文件的文件块,而不是整个文件或所有块,而不是它应该。

任何帮助都将不胜感激。

谢谢, 西蒙

1 个答案:

答案 0 :(得分:0)

事实证明问题出在其他地方,我开始在文件完全上传之前读取传入的流,因此由于某些原因导致打破传入流。