Flask SQLAlchemy不会关闭MySQL数据库连接

时间:2018-10-25 14:57:41

标签: python mysql flask sqlalchemy flask-sqlalchemy

我有一个使用Flask-SQLAlchemy和MySQL数据库的Flask应用程序,其中的db定义如下:

db.py

from flask_sqlalchemy import SQLAlchemy
db = SQLAlchemy()

main.py

from db import db
app = Flask(__name__)
app.config['SQLALCHEMY_TRACK_MODIFICATIONS'] = False
app.config['SQLALCHEMY_DATABASE_URI'] = "mysql+pymysql://" + \
        DB_USERNAME + ":" + DB_PASSWORD + "@" + DB_HOST + "/" + DB_DATABASE
db.init_app(app)

@app.teardown_appcontext
def teardown_db(error):
    db.session.close()
    db.engine.dispose()

user.py

class User(db.Model):
    id = db.Column(db.Integer, primary_key=True)
    username = db.Column(db.String(80), unique=True, nullable=False)
    email = db.Column(db.String(120), unique=True, nullable=False)

我使用模型db.engine.execute()查询数据库,以在需要时编写原始SQL查询,或使用集成的Flask-SQLAlchemy API读取诸如User.query.filter_by().all()之类的数据。

我使用以下命令将新数据写入数据库:

new_user_entry = User(username = "abc", email = "abc@example.com")
db.session.add(new_user_entry)
db.session.commit()

我正在使用show processlist监视我的MySQL服务器,并且我注意到,对于每个出现的请求,数据库连接都将增加2。仅当我停止Flask进程时,数据库连接才似乎重置。随着时间的流逝,MySQL服务器会引发以下错误:

`sqlalchemy.exc.TimeoutError: QueuePool limit of size 10 overflow 10 reached, connection timed out, timeout 30 (Background on this error at: http://sqlalche.me/e/3o7r)`

我正在使用带有两个工作进程的gunicorn和gevent / eventlet服务该应用程序。我使用的是python3。

我在这里错过了什么吗?我尝试结束数据库会话并处理引擎,但这似乎不起作用。

2 个答案:

答案 0 :(得分:2)

我终于找到了解决上述问题的方法。

我使用了here中定义的声明性模型,而不是遵循here给出的Flask-SQLAlchemy的快速入门文档。

更改的文件如下:

db.py

from sqlalchemy import create_engine
from sqlalchemy.orm import scoped_session, sessionmaker
from sqlalchemy.ext.declarative import declarative_base

engine = create_engine(DB_URI, convert_unicode=True)
db_session = scoped_session(sessionmaker(autocommit=False,
                                         autoflush=False,
                                         bind=engine))
Base = declarative_base()
Base.query = db_session.query_property()

def init_db():
    import user
    Base.metadata.create_all(bind=engine)

main.py

from db import init_db, db_session

init_db()

@app.teardown_appcontext
def shutdown_session(exception=None):
    db_session.remove()

user.py

from sqlalchemy import Column, Integer, String
from data_models.db import Base
class User(Base):
    id = db.Column(Integer, primary_key=True)
    username = db.Column(String(80), unique=True, nullable=False)
    email = db.Column(String(120), unique=True, nullable=False)

要查询记录,我们可以使用User.query.filter_by().all()db_engine.execute()

要将新数据写入数据库,我们可以使用以下代码:

new_user_entry = User(username = "abc", email = "abc@example.com")
db_session.add(new_user_entry)
db_session.commit()

答案 1 :(得分:1)

如果我们需要在创建新的子进程之前关闭会话(建议使用此方法),则应使用以下方法:

db.session.remove()
db.engine.dispose()

喜欢

from multiprocessing import Process
from app import db

@app.route('/process/start/', methods = ["GET"])
def process_start():
    db.session.remove()
    db.engine.dispose()
    p = Process(target = long_task)
    p.start()
    return 'started the long task'

def long_task():
    '''
    do long task
    '''