将大型数据集从源流式传输到客户端api

时间:2018-11-30 07:18:52

标签: web-services java-ee large-data chunks

我需要有时将一个最大源数据从100万到150万个数据发送到另一个源系统。

作为它的一部分,我计划在目标系统中创建一个剩余端点,该端点可以接受有效负载并将其保存在数据库中。但是问题在于,在有效载荷中发送大量数据非常乏味且难以实现。

有人可以指导我正确的方法吗? 1.从源系统分块发送数据并将其合并到目标 2.将数据从一个系统传输到另一个系统 3.消息传递机制可以实现这一目标吗? 4.还是其他更好的实现方式?

当前,源和目标都是基于Java-ee,spring boot,基于oracle db的应用程序。

任何在不影响性能的情况下实施相同准则或代码片段都非常有帮助。

谢谢。

0 个答案:

没有答案