Question

我试图在BigQuery的AppEngine RequestLog表中使用表装饰器范围。根据文档，日志条目是LogEntry https://cloud.google.com/logging/docs/reference/v2/rest/v2/LogEntry类型的对象。

有两列timestamp和receiveTimestamp。第一列描述是＆＃34;日志条目描述的事件发生的时间＆＃34;对于第二个＆＃34; Stackdriver Logging＆＃34;收到日志条目的时间。

我尝试使用timestamp列和表装饰器范围来比较表查询表中的时间范围和记录数。

查询我在哪里使用时间戳列。

SELECT count(*), MIN( timestamp ), max( timestamp )
FROM [project_id:dataset.appengine_googleapis_com_request_log_20170622]
WHERE timestamp between timestamp('2017-06-22 01:00:00') and 
date_add(timestamp('2017-06-22 01:00:00'), 1, 'hour')

查询结果。

1698320 | 2017-06-22 01:00:00 UTC | 2017-06-22 01:59:59 UTC

查询我在哪里使用表装饰器范围。

--select timestamp_to_msec(timestamp('2017-06-22 01:00:00')) as time1,
         timestamp_to_msec(date_add(timestamp('2017-06-22 01:00:00'), 1, 'hour')) as time2
  SELECT count(*), min(timestamp), max(timestamp)
  FROM [project_id:dataset.appengine_googleapis_com_request_log_20170622@1498093200000-1498096800000]

查询结果。

1534754 | 2017-06-22 00:40:45 UTC | 2017-06-22 01:35:59 UTC

我没有获得相同的日期范围和相同数量的记录。这三个时间戳中的每一个是什么意思？桌面装饰器范围如何在引擎盖下工作？（BigQuery是否会制作表的快照）

Answer 1

表装饰器文档enter link description here解释它使用快照。但它“引用表格的快照” - 表示数据被摄入bigquery的时间。但是，这与表中的时间戳字段完全无关，因为这些字段表示相关事件发生的时间，而不是字段被提取到bigquery的时间。

BigQuery表装饰器与AppEngine RequestLog时间戳

1 个答案: