报告多个CSV文件

Question

这可能是一个模糊的问题。每天给我4个CSV文件，每个文件大约有500k行。我需要在它们上执行'join'和'where'等效的RDMS操作来创建每日报告。例如，工作流程可以是：

1. 根据ID为
的列加入2个CSV文件
2. 根据日期列过滤数据集
3. 根据某些条件
将新过滤的数据集加入另一个CSV文件
4. 根据更多标准进一步过滤掉它们
5. .... //重复
6. 将最终数据集输出为CSV文件

我在考虑编写一个PHP脚本：

1. 将每个CSV文件加载到MySQL等关系数据库中
2. 使用SQL
执行连接和where条件
3. 将结果加载到临时表中
4. 重复2和3
5. 将最终数据加载到表格中
6. 将表格导出为CSV文件。

您认为最好的方法是什么？