将新客户的数据处理到数据仓库中

时间:2019-05-27 10:00:32

标签: mysql database etl data-warehouse

我们有一个数据仓库,正在基于srvtimestamp处理各种客户端的增量数据。当前我们已经在OLTP中使用以前或历史交易打开了新客户端,我需要从第一天开始为新客户端处理数据。我需要一个动态的过程每次检查新客户端及其srvtimestamp来处理数据。

我们正在使用Mysql Storedprocedures进行增量数据加载,该过程从表中选择max(srvtimestamp)并根据srvtimestamp加载数据

1 个答案:

答案 0 :(得分:0)

您应该在如下所示的select中使用case语句。

select case new_client_flag = 'New' then  min(srvtimestamp) else max(srvtimestamp) end as 'srvtimestamp'
from table

您应该为new_client_flag使用标志,并在

首次处理后对其进行更新
new_client_flag = 'NEW'