如何手动设置Google App Engine请求日志的严重性?

时间:2019-11-19 21:35:21

标签: python-3.x google-app-engine logging google-cloud-platform stackdriver

我在Google App Engine Python 3标准环境中有一个应用程序。我已经按照Writing Application Logs(在“查看相关的请求日志条目”部分中的说明)中的说明将它们设置为按它们的请求进行分组。

该页面指出:

  

“子级”日志条目中的最高严重性不会自动应用于顶级条目。如果需要这种行为,请在顶级条目中手动设置最高严重性。

有问题的顶级条目是App Engine自动创建的请求日志。它始终处于日志级别“任何”。我没有看到如何更改其日志级别/严重性。

这是我现在拥有的代码(其中一个分支):

import os
from flask import request
from google.cloud import logging as gcp_logging
from google.cloud.logging.resource import Resource

client = gcp_logging.Client()
logger = client.logger('my_custom_log_type')
trace_id = (f"projects/{os.environ['GOOGLE_CLOUD_PROJECT']}/traces/"
            f"{request.headers['X-Cloud-Trace-Context'].split('/')[0]}")
res = Resource(type='gae_app',
               labels={'project_id': os.environ['GOOGLE_CLOUD_PROJECT'],
                       'module_id': os.environ['GAE_SERVICE'],
                       'version_id': os.environ['GAE_VERSION']})
logger.log_text('Sample log text', resource=res, trace=trace_id, severity='INFO')

将日志与请求分组在一起是一种完美的方法,但是父级(请求)日志例如

> * 2019-11-19 15:54:56.613 EST  GET  200  1.21 KiB  390ms  Chrome 78  /

以“任何”日志级别显示。我希望它适当地是“ Info”或“ Error”。我该如何做到这一点?

1 个答案:

答案 0 :(得分:0)

我还没有找到修改自动生成的日志的方法。

我仍然想知道是否有更好的方法,因此我不会将此答案标记为已接受。

但是,通过添加我自己的请求日志并忽略自动生成的请求日志,我发现了一种非常满足我需要的解决方法。

对于每个子日志,我都使用与问题代码相同的想法,但是在flask的g对象上更新了一个新属性,以跟踪请求中迄今为止最严重的日志级别。

from flask import g

LOG_LEVELS = ('DEFAULT', 'DEBUG', 'INFO', 'WARNING', 'ERROR', 'CRITICAL')

previous_level = g.get('log_level', 0)
g.log_level = max(previous_level, new_level)

(其中new_level是LOG_LEVELS中级别的整数索引)

然后,为了生成新的请求日志,我使用了缩小版本的this solution

def log_request(response):
    logger = client.logger('my_request_logger')
    severity = LOG_LEVELS[g.get('log_level', 0)]
    request_info = {
        'requestMethod': request.method,
        'requestUrl': request.url,
        'status': response.status_code,
        'userAgent': request.headers.get('USER-AGENT'),
        'responseSize': response.content_length,
        'latency': g.request_duration(),
        'remoteIp': request.remote_addr
    }
    if request.method == 'POST':
        payload = request.get_json() or json.loads(request.data.decode())
    else:
        payload = {}
    logger.log_struct(payload,
                      trace=trace_id,
                      http_request=request_info,
                      severity=severity)

以上内容位于my_logging模块中。然后,只需对main.py进行一些补充,即可完成这项工作:

import time
from flask import g
import my_logging

@app.before_request
def setup_timing():
    g.request_start_time = time.time()
    g.request_duration = lambda: f'{(time.time() - g.request_start_time):.5f}s'

@app.after_request
def log_request(response):
    my_logging.log_request(response)
    return response

这工作得相当好-我很想听听任何改善它的想法。