TDE csv提取最佳使用

Question

我打算收集一些旧数据并合并它。这些文件都是每天分解的csv，因此有很多。

1. 将csv文件合并为一个
2. 我在考虑使用tde提取API来只选择对我有价值的列
3. 然后我会在每日更新文件上使用该脚本继续保持列对齐
4. 然后我会将我的新迷你摘录添加到大型合并
中
5. （有没有办法在此过程中创建或插入唯一的ID或主键，这样我也可以轻松地进行增量刷新？）

这是一种有效的做事方式吗？我处理的所有文件都是excel或csv，它们不会自动合并。