pysparkling H2OConf干扰我的应用程序日志

时间:2018-06-11 22:03:14

标签: python logging pyspark h2o sparkling-water

这是我的代码:

from pysparkling import H2OConf #commenting this line makes it work
import logging

logging.basicConfig(filename='my_log.log',level=logging.INFO)
logging.info('test')

除非我评论代码的第一行,否则无法创建日志文件。如果我这样做,那么一切正常。我假设它在H2OConf内部导入会混淆处理程序。有人经历过类似的事吗?

我用

运行脚本

spark-submit --master yarn script.py

谢谢

0 个答案:

没有答案