Django打开文件太多了

时间:2017-03-17 03:25:33

标签: python django

我的django应用程序中出现“打开文件太多”。 我认为它与日志系统有关,因为每个请求都会为文件stage.log创建一个新的描述符。

处理程序 python_logging_rabbitmq.RabbitMQHandler 属于此程序包python-logging-rabbitmq

有任何帮助吗? 感谢。

LOGGING = {
    'version': 1,
    'disable_existing_loggers': False,
    'filters': {
        'request_id': {
            '()': 'log_request_id.filters.RequestIDFilter'
        },
        'ip': {
            '()': 'audit.ip_address.filters.IPAddressFilter'
        }
    },
    'formatters': {
        'standard': {
            'format': STANDARD_FORMAT
        },
        'compact': {
            'format': COMPACT_FORMAT
        },
        'json': {
            '()': 'pythonjsonlogger.jsonlogger.JsonFormatter',
            'fmt': JSON_FORMAT
        }
    },
    'handlers': {
        'file': {
            'level': 'DEBUG',
            'class': 'logging.handlers.RotatingFileHandler',
            'filters': ['request_id', 'ip'],
            'filename': BASE_DIR + '/logs/stage.log',
            'formatter': 'standard',
            'backupCount': LOG_FILE_BACKUP_COUNT,
            'maxBytes': LOG_FILE_MAX_SIZE
        },
        'console': {
            'level': 'DEBUG',
            'class': 'logging.StreamHandler',
            'filters': ['request_id', 'ip'],
            'formatter': 'compact'
        },
        'rabbit': {
            'level': 'DEBUG',
            'class': 'python_logging_rabbitmq.RabbitMQHandler',
            'formatter': 'json',
            'host': RABBIT_HOST,
            'username': RABBIT_USER,
            'password': RABBIT_PWD,
            'exchange': 'log',
            'fields': {
                'origin': 'main-api',
                'env': 'stage'
            },
            'fields_under_root': True
        }
    },
    'loggers': {
        'app': {
            'handlers': ['console', 'file', 'rabbit'],
            'level': 'DEBUG',
            'propagate': False,
        },
        'django.request': {
            'handlers': ['console', 'file'],
            'level': 'DEBUG',
            'propagate': False,
        },
        'requests.packages.urllib3': {
            'handlers': ['console', 'file'],
            'level': 'DEBUG',
            'propagate': True,
        }
    }
}

1 个答案:

答案 0 :(得分:1)

使用ulimit -n检查系统限制。在我的机器中,值为65536。

然后你可以设置更大的价值。

ulimit -n 70000

或者:

sudo echo 70000 > /proc/sys/fs/file-max