使用gunicorn异步运行长轮询烧瓶应用程序

时间:2020-10-02 11:19:56

标签: python flask gunicorn

我正在尝试运行一个对AWS SQS队列进行轮询的Flask应用程序,我要求该应用程序不断轮询并异步响应客户端请求,但是我发现该应用程序在轮询时被阻止了。

我已经阅读了有关使用gevent的其他文章,但似乎无法正常工作。

用于运行应用程序的命令,

gunicorn src.app:app \
        --bind 0.0.0.0:8081 \
        --timeout 127 \
        -k gevent --worker-connections=2000

应用程序代码

from flask import Flask
from werkzeug.middleware.proxy_fix import ProxyFix
from flask_sqlalchemy import SQLAlchemy
from flask_migrate import Migrate

from src import security
from src.config import config

app = Flask(__name__)
app.config['SQLALCHEMY_DATABASE_URI'] = config.pg_url
app.config['SQLALCHEMY_TRACK_MODIFICATIONS'] = False

db = SQLAlchemy(app)
migrate = Migrate(app, db)

app.wsgi_app = ProxyFix(app.wsgi_app)


from src.app import routes
from src.app.services.sqs.queue import SQSQueue
from src.app.services.sqs.message_processor import MessageProcessor


if config.group == 'JobServer':
    SQSQueue.poll(MessageProcessor)

轮询代码,

def poll(action):
        while True:
            try:
                message = self.get_message()
                if message is None:
                    time.sleep(5)
                else:
                    # do something
            except Exception:
                pass

1 个答案:

答案 0 :(得分:1)

仅使用gevent worker是不够的。您还需要在代码中使用它。对于您的代码,修补IO库可能就足够了。

为简单起见,我通常会在导入中尽可能早地使用monkey.patch_all()

例如,在您的应用程序导入中,我会像这样将其放在顶部

# Use gevent to patch IO modules as soon as possible.
from gevent import monkey; monkey.patch_all()
from flask import Flask
from werkzeug.middleware.proxy_fix import ProxyFix
from flask_sqlalchemy import SQLAlchemy
from flask_migrate import Migrate

from src import security
from src.config import config

http://www.gevent.org/intro.html