Azure Log Analytics和Data Lake Store诊断日志 - 过滤掉数据备份日志事件

时间:2018-05-25 10:31:34

标签: azure azure-data-lake azure-log-analytics

我们已配置Azure Data Lake Store诊断日志以将数据推送到Log Analytics。此数据稍后用于审计目的。

我们遇到的问题 - 我们的每晚备份过程(将数据从一个Data Lake Store备份到另一个Data Lake Store)会生成数十亿字节的几乎无用的日志记录。我们可以在将这些日志上传到Log Analytics(在查询中)后过滤掉这些日志,但这些数据占用空间并且需要花费很多钱。

在将某些日志上传到Log Analytics之前是否有办法过滤掉某些日志,因此这些数据永远不会进入Log Analytics? (在我们的例子中,这是由BACKUP用户生成的日志)。可以使用哪些其他选项来摆脱数据备份日志?

1 个答案:

答案 0 :(得分:2)

在将日志路由到Log Analytics之前,无法以这种方式过滤日志。

将来,您可以取消备份流程,转而使用geo-redundant Azure Data Lake Store