慢上传Nginx和Gluster

时间:2014-09-13 03:57:00

标签: django amazon-web-services nginx gunicorn glusterfs

我们在使用django,gunicorn,在nginx后面运行上传到我的网站时遇到了麻烦。我们还在应用服务器上安装了gluster,其中文件被上载并在多个服务器上进行分布式复制。 (所有层都在AWS上)

当我们上传文件(~15mb)时,我们得到一个502 Bad Gateway。我们还检查显示upstream prematurely closed connection while reading response header from upstream, client的nginx日志。我们的上传速度非常慢(<5k)。我们可以很好地上传到其他网站,我们的互联网上传大约10MB左右。

我是否缺少任何配置文件以允许通过gunicorn或nginx上传文件?

nginx.conf

user www-data;
worker_processes 4;
pid /run/nginx.pid;

events {
    worker_connections 768;
    # multi_accept on;
}

http {

    ##
    # Basic Settings
    ##

    sendfile on;
    tcp_nopush on;
    tcp_nodelay on;
    keepalive_timeout 65;
    types_hash_max_size 2048;
    # server_tokens off;

    server_names_hash_bucket_size 256;
    # server_name_in_redirect off;

    include /etc/nginx/mime.types;
    default_type application/octet-stream;

    ##
    # Logging Settings
    ##

    access_log /var/log/nginx/access.log;
    error_log /var/log/nginx/error.log;

    ##
    # Gzip Settings
    ##

    gzip on;
    gzip_disable "msie6";

    # gzip_vary on;
    # gzip_proxied any;
    # gzip_comp_level 6;
    # gzip_buffers 16 8k;
    # gzip_http_version 1.1;
    # gzip_types text/plain text/css application/json application/x-javascript text/xml          
    application/xml application/xml+rss text/javascript;

    ##
    # nginx-naxsi config
    ##
    # Uncomment it if you installed nginx-naxsi
    ##

    #include /etc/nginx/naxsi_core.rules;

    ##
    # nginx-passenger config
    ##
    # Uncomment it if you installed nginx-passenger
    ##

    #passenger_root /usr;
    #passenger_ruby /usr/bin/ruby;

    ##
    # Virtual Host Configs
    ##

    include /etc/nginx/conf.d/*.conf;
    include /etc/nginx/sites-enabled/*;
}

conf.d文件:

client_max_body_size 256m;

_

proxy_read_timeout 10m;
proxy_buffering off;
send_timeout 5m;

_

我们感觉它可能是nginx或gluster mount。我们已经研究了好几天了,并且已经查看了nginx和gunicorn中的超时*变量并且没有取得任何进展。

任何帮助将不胜感激,谢谢!

1 个答案:

答案 0 :(得分:2)

所以,我们解决了这个问题。它与我们的任何代码,服务器设置或亚马逊无关。我们将其缩小到仅在我们的网络中上传的linux机器。有一个“tcp窗口缩放”的错误&#39;在防火墙中,在达到限制后重置上载。

感谢任何尝试过的人。