Question

当我尝试在托管在数字海洋中的项目中上传一个大小约为 600MB 的大型 csv 文件时，它尝试上传但显示 502 Bad Gateway Error (Nginx)。

该应用程序是一个数据转换应用程序。

这在本地工作时效果很好。

sudo tail -30 /var/log/nginx/error.log

节目

[error] 132235#132235: *239 upstream prematurely closed connection while reading response header from upstream, client: client's ip , server: ip, request: "POST /submit/ HTTP/1.1", upstream: "http://unix:/run/gunicorn.sock:/submit/", host: "ip", referrer: "http://ip/"

sudo nano /etc/nginx/sites-available/myproject

节目

server {
    listen 80;
    server_name ip;
    client_max_body_size 999M;

    location = /favicon.ico { access_log off; log_not_found off; }
    location /static/ {
       alias  /root/static/;
    }
    location / {
        include proxy_params;
        proxy_pass http://unix:/run/gunicorn.sock;
    }
}

nginx.conf

user root;
worker_processes auto;
pid /run/nginx.pid;
include /etc/nginx/modules-enabled/*.conf;

events {
        worker_connections 768;
        # multi_accept on;
}

http {

        ##
        # Basic Settings
        ##

        sendfile on;
        tcp_nopush on;
        tcp_nodelay on;
        keepalive_timeout 65;
        types_hash_max_size 2048;
        # server_tokens off;

        # server_names_hash_bucket_size 64;
        # server_name_in_redirect off;

        include /etc/nginx/mime.types;
        default_type application/octet-stream;

在转换过程发生时，我还运行了 javascript 加载器。我该如何解决这个问题？

Answer 1

如果您使用 django 3.1 或更高版本，您可以通过这种方式异步处理文件，并在文件转换发生时向用户返回响应。您的视图应如下所示...

    import asyncio
    from django.http import JsonResponse
    from asgiref.sync import sync_to_async
    
    
    @sync_to_async
    def crunching_stuff(my_file):
        # do your conversion here
            
    async def upload(request):
        json_payload = {
            "message": "Your file is being converted"
        }
        my_file = request.POST.get('file')
        
        asyncio.create_task(crunching_stuff(my_file))
        return JsonResponse(json_payload)

在前端，如果您使用 Dropzone.js，您的用户可以看到文件上传进度并更快地得到响应。这是更好的用户体验。 https://www.dropzonejs.com/

Answer 2

此错误可能表示存在多个问题。它在本地对您有效这一事实加强了问题依赖于 nginx 方面的可能性。

您可以尝试通过增加超时阈值（如建议的 here）和缓冲区大小来解决它。将此添加到您服务器的 nginx.conf：

proxy_read_timeout 300s;
proxy_connect_timeout 300s;

proxy_buffer_size          128k;
proxy_buffers              4 256k;
proxy_busy_buffers_size    256k;

如何修复生产中的 502 错误网关错误（Nginx）？

2 个答案: