什么微服务模式适合传输大数据文件

Question

如果多个微服务处理需要大型JASON文件（10mb），那么最好使用哪种企业架构/设计模式？每个微服务都需要文件中的整个数据来处理它。

Answer 1

• 共享大型数据集可能表示将代码库划分为服务的次优。优选的是，同一域的所有处理都将在单个服务中完成。
• 当多个服务确实对同一数据集进行了有意义的处理时 - 每个服务都应该拥有自己的副本。共享数据库通常是一个坏主意！
• 当涉及重量级数据时，将数据克隆到＆＃34;常规＆＃34;排队系统（如RabbitMQ / SQS）非常麻烦且效率低下。
  • A＆＃34;重量级＆＃34;排队系统，如Kafka / Kinesis - 可能是最有效的。将保留一份数据副本，并且每个服务都可以从＆＃34;共享＆＃34;流。

Answer 2

将其存储在其他微服务可以读取的位置。 使用发布/订阅或事件-通知感兴趣的微服务文件的发布位置。其他微服务可以自己读取。

Answer 3

1. 客户端/系统将事件发布到实现Saga模式的API，并将链接传递到文件所在的位置（例如，上传到AWS S3存储桶）。
2. Saga模式中的每个事件/步骤均根据其要求处理文件。
3. 客户端/系统可以轮询更新，或者可以将原始POST设计为传递回调/通知服务端点。