如何以流形式使用对Google Cloud Datastore的更改？

Question

Cloud Dataflow页面暗示这是可能的，但是我还没有在Google Cloud Datastore文档中找到观察变更事件的方法。怎么做？

Answer 1

据我所知，Cloud Datastore与Dataflow的集成是通过DatastoreIO（现在基于DatastoreV1）进行的，只能用作批处理作业的有限来源。

我一直在尝试寻找一种替代解决方案，该解决方案将允许您（直接或间接）将数据存储区用作无限制的来源（例如，创建发布/存储主题，以发布数据存储区更改并可以从数据流中使用它），但我认为这不是一个可行的解决方案，因为正如您所说，没有简单的方法可以检测数据存储区中的更改（实体的添加，实体的修改等）。

就目前而言，我已经提出了一项内部要求，以改进文档以修改映像，以使其不暗示Cloud Datastore可以与Streaming Pipeline一起使用，或者阐明该用例。