我需要使用数据集和BigQuery中的数据视图。我想对所有不同的数据集和视图进行多少查询。我的目标是了解当前正在使用哪些数据集和视图。
我查看了审计日志,但是我无法将所有记录导出到excel中进行分析。在特定的一天,我最多只能导出300条日志。有没有一种方法可以在BigQuery中运行查询,该查询将为我提供此数据,而不是从审核日志中导出?
答案 0 :(得分:2)
是-您可以设置export "sink" in Stackdriver以便将数据导入BigQuery进行分析。他们还提供有关payload fields are transformed如何导出的文档。
第一个链接包括一些有关仅过滤BigQueryAuditMetadata
类型的注释,但是请注意,您还可以使用advanced log filter过滤有效载荷内部的字段(例如,如果您只想查看哪些表正在被写入,读取,仅包括某些用户等。
很显然,您可以根据需要将所有内容流式传输到BigQuery中,但是过滤可以帮助降低噪音。