计算和报告数据完整性

时间:2015-02-25 10:13:56

标签: data-quality

我一直致力于测量数据的完整性,并为HRIS系统创建可操作的报告。

到目前为止,我已经使用了Excel,但是现在报告的要求已经稳定,并且需要更快的响应时间,我希望将工作提升到另一个级别。与此同时,我也希望有更详细的选项来区分不同的单位。

作为一个例子,我正在寻找缺少的领域。因此,对于每家公司的每位员工,我只想计算缺少的字段数。

对于我希望验证数据的其他字段 - 例如,与招聘日期相比的生日,不同值的阈值,员工组与责任级别的比较等等。

我的问题是从这里搬到哪里。在处理导入列表,对列表中的字段进行评估,然后在公司和其他级别对其进行量化时,是否有任何语言比其他语言更好?我希望能够从我们的不同系统中提取数据,然后让程序进行所有计算并以某种方式汇总结果。 (我认为这是一次很好的学习经历。)

1 个答案:

答案 0 :(得分:1)

过去我做过类似的事,有点被骗了。我编写了一个程序,每晚运行,识别缺少的字段(不是必需的,但数据完整性必需),并将它们转储到一个不完整的记录表,该记录表在进程运行前每晚清除。然后,我向负责组(薪资/福利/薪酬/人力资源管理)负责缺失元素的每个不同组发送批量电子邮件,以便添加缺失的数据。我使用.Net和Oracle数据库并通过Lotus Notes发送电子邮件,但类似的设计应该适用于任何环境。