node.js http服务器并发问题

时间:2013-12-05 06:52:29

标签: java javascript node.js http concurrency

每当我尝试连续发送快速HTTP Post时,服务器有时会崩溃(java.net.ConnectException:连接被拒绝:连接),有时冻结(没有错误,但不能再使用它),有时候工作.. ..

如果我慢慢地将HTTP Post发送到服务器,似乎根本没有问题。

我在node.js中有一个http服务器的简单代码 - 我的猜测是,有时NodeJS服务器会收到一个请求,然后在它发出响应之前接收另一个请求,从而导致各种问题。如何让我的服务器能够同时接受多个请求?

var server = http.createServer(function (req, res) { 

     if (req.method != 'POST') {
          res.end();
     }
     else {
          req.on('data', function(chunk) {
               //Do some stuff here
               file1=JSON.parse(chunk.toString());
               console.log("Hello World") ;
          }

          req.on('end', function() {
               res.writeHead(200, "OK", {'Content-Type': 'text/html'});
               res.end();
          });
     }
} server.listen(9000);

EDIT 这是发送HTTP POSTS的java程序

 public static String httpUrlRequest(String requestURL, String json) {
       URL url;
       String response = "";
       HttpURLConnection connection = null;
       InputStream is = null;
       try {
           url = new URL(requestURL);

           connection = (HttpURLConnection) url.openConnection();
           connection.setDoOutput(true);
           connection.setRequestMethod("POST");
           connection.getOutputStream().write(json.getBytes());
           connection.getOutputStream().flush();
           connection.getOutputStream().close();
           int code = connection.getResponseCode();
           System.out.println("code" + code);

       } catch (Exception e) {
           e.printStackTrace();
       } finally {
           connection.disconnect();
       }
       return response;
    }

    public static void main(String[] args) {
        Date date = new Date();
       Gson gson = new Gson();
       Map<String, Object> tempMap = gson.fromJson(json, new TypeToken<Map<String, Object>>(){}.getType());

       for(int i = 0; i < 10; i++){
           date = new Date();
           tempMap.put("GetOn", getDateString(date));
           httpUrlRequest("http://111.111.11.111:9000" ,gson.toJson(tempMap));
       }

    }

更新: 如果我在nodejs服务器中解析JSON,那么有时我会得到拒绝连接的错误。

因此,当我解析请求数据时,由于某种原因,nodejs无法接收发送的整个json文件(5KB)。相反,它只收到一半,我的Java控制台说连接错误。在nodejs正确解析大约3到5个请求之后会发生此问题。然后在下一个请求中,一切都会出错。如何判断java是否断开连接,导致只发送一半JSON,或者是否只发送了一半JSON导致nodejs崩溃,最终导致连接错误。

如果我注释掉所有解析,那么我再也不会得到错误了。我甚至不理解为什么nodejs中的JSON.Parse会引发java连接错误....

2 个答案:

答案 0 :(得分:3)

你的问题在于:

 req.on('data', function(chunk) {
   //Do some stuff here
   file1=JSON.parse(chunk.toString());
   console.log("Hello World") ;
 }

由于正文可以在多个数据包中发送,因此您可能会收到多个'data'事件,从而尝试解析不完整的JSON。试试这个:

var chunks = [];

req.on('data', function(chunk) {
  chunks.push(chunk);
}

req.on('end', function () {
  // assemble all chunks
  var body = Buffer.concat(chunks).toString(),
      file1 = JSON.parse(body);

  res.writeHead(200, "OK", {'Content-Type': 'text/html'});
  res.end();
});

答案 1 :(得分:0)

在这种测试中,通过连接端口很容易达到最大吞吐量。

  1. http://www.slideshare.net/sh1mmer/a-million-connections-and-beyond-nodejs-at-scale
  2. https://groups.google.com/forum/#!topic/nodejs/cRRS7ZJkyzc
  3. 在运行node.js之前,简单的解决方案是ulimit -n 100000。但是在生产过程中永远不要这样做,如果你需要处理它,最好考虑群集以实现真正大的连接。