是否有人可以将WatchedFileHandler和StreamHandler配置为可用于Python的日志记录?

时间:2019-02-25 03:26:23

标签: python logging subprocess

我试图建立一个日志记录处理程序,该处理程序不仅向屏幕发出消息,而且还向记录的文件发出消息。由于此程序运行的是事件驱动的模拟器,该模拟器运行3个单独的程序,因此我想配置一个WatchedFileHandler。为了提供最小的工作集,这是dictConfig设置:

# this is the sub_test.py logger setup
import os
import logging, logging.handlers, logging.config

def setup_logging(name, fname, args, mode='a', idtag=""):
  log_file = os.path.splitext(fname)[0]+".log"

  level = 'ERROR'
  if any(x in ["-v","--verbose"] for x in args):
    level = 'INFO'
  if any(x in ["-d","--debug"] for x in args):
    level = 'DEBUG'

  conf = {
    'version': 1,
    'disable_existing_loggers': True,
    'formatters': {
        'default': {'format':name+' (default): %(levelname)s - %(message)s',
                    'datefmt':'%Y-%m-%d %H:%M:%S'},
        'SH': {'format':name+' ('+idtag+'SH): %(levelname)s - %(message)s',
                   'datefmt':'%Y-%m-%d %H:%M:%S'},
        'FH': {'format':name+' ('+idtag+'FH): %(levelname)s - %(message)s',
                   'datefmt':'%Y-%m-%d %H:%M:%S'},
    },
    'handlers': {
        'console': {
            'level': level,
            'class': 'logging.StreamHandler',
            'formatter': 'SH',
            'stream': 'ext://sys.stdout'
        },
        'file': {
            'level': 'DEBUG',
            'class': 'logging.handlers.WatchedFileHandler',
            'formatter': 'FH',
            'filename': log_file,
            'mode': mode,
            # more?
        },
    },
    'loggers': {
        '': { # the root logger
            'level': level,
            'handlers': ['console'],
            'propegate': False
        },
        name: {
            'level': 'DEBUG',
            'handlers': ['file'],
            'propegate': True
        },
    },
    #'propagate': True
  }

  logging.config.dictConfig(conf)
  logger = logging.getLogger(name)

  return logger

带有简单的服务程序“ sub_srv.py”:

#!/usr/bin/env python3
# a simple service example with some logging.
import sub_test
from time import sleep
import logging

LOG_NAME="test_log"

logger = sub_test.setup_logging(LOG_NAME, "test.log", ["-d"], mode='a', idtag="srv:")

logger.debug(" inside of the server")

sleep(1)

exit(1)

和一个简单的测试程序来驱动它:

from subprocess import Popen, PIPE
import sys
import sub_test
from time import sleep
import logging

LOG_NAME="test_log"

logger = sub_test.setup_logging(LOG_NAME, "test.log", sys.argv, mode='w', idtag="main:")

logger.info("here we go")

r = Popen("./sub_srv.py")

while True:
    if r.poll():
        break
    print("ok...")
    sleep(0.5)

logger.info("done...")

logging.shutdown()

我从StreamHandler得到以下输出:

test_log (main:SH): INFO - here we go
ok...
test_log (srv:SH): DEBUG -  inside of the server
ok...
ok...
test_log (main:SH): INFO - done...

但是我将以下输出写入“ test.log”文件:

test_log (main:FH): INFO - here we go
test_log (main:FH): INFO - done...
of the server

从我看来,很明显,输出未按预期刷新并重新打开。我也尝试了设置传播变量的各种组合,但是我无法解决这个问题。任何建议表示赞赏。

1 个答案:

答案 0 :(得分:0)

以供将来参考。我知道了似乎在日志记录的WatchedFileHandler中有一个错误(我将报告)。解决方法是在上面的示例中简单地将'mode'=模式(其中子例程mode ='w')更改为'mode'='a',并在第一次执行os.remove(log_file)来清除文件。

希望这很有用。