用于发电厂数据的数据压缩技术

Question

我最近正在研究数据管理。读完一段时间后，我仍然没有全面了解数据如何从数据采集流向数据库或仓库。

在发电厂，我安装了1000个传感器，所以我想知道数据存储在数据库之前发生了什么。例如，从传感器数据采样频率为1Hz，然后我们需要进行大量数据进行数据压缩，然后将其发送到数据库我猜...所以我想知道这些都是如何完成的，特别是数据压缩，如果数据是带有时间戳的数字值，可以使用什么样的数据压缩技术......在大数据概念中，数据是如何被压缩的。

Answer 1

OSIsoft PI执行此操作的方法是检查收集点与前一点的偏差程度。如果它是一个小数量，那么该点被“删除”，因此只存储有意义的数据。当您在没有数据的时候请求值。 PI插入它。

Answer 2

数据可以通过多种方式进行压缩，从压缩到完全定制的解决方案。事实上，对于Power Plant数据，您正在查看其中一个较大的系统PI from OSISOFT。我曾经为一家公司工作，他们将它们用于8个发电站。他们有一个完全定制的数据库系统，用于存储所有测量数据。它显然是经过优化的，因此传感器的频繁读数占用的空间很小，缺少读数不会增加占用的空间。他们是如何做到的我不知道 - 我希望它是专有的，他们不会告诉别人。

但是，数据如何从传感器流向数据库可能很复杂。在Osisoft网站上逛一逛 - 他们有一些数据可用。