这是我的代码:
from pysparkling import H2OConf #commenting this line makes it work
import logging
logging.basicConfig(filename='my_log.log',level=logging.INFO)
logging.info('test')
除非我评论代码的第一行,否则无法创建日志文件。如果我这样做,那么一切正常。我假设它在H2OConf
内部导入会混淆处理程序。有人经历过类似的事吗?
我用
运行脚本 spark-submit --master yarn script.py
谢谢