我目前正将BigQuery的Firebase事件数据提取到现场数据库进行分析。每次运行ETL作业时,我都会提取Firebase的日内表以及前4天(自前几天的表continue to be updated)。由于事件没有密钥或唯一ID,我将删除&在本地重新插入过去4天的数据,以便从BigQuery刷新数据。
我是否可以在日内表上创建一个名为event_dim.etl_status的新字段,以跟踪已在本地移动的事件?如果是这样,一旦从* _intraday重命名为* _yyyymmdd,该字段是否会进入app_events_yyyymmdd表?
修改 更多基于dsesto评论的上下文: