如何使用Spring Batch实现步骤的分布式处理

Question

使用Spring批处理，我希望我的步骤可以跨节点分布，并为给定的作业执行它们。我有一个用例，其中一个作业有多个步骤，每个步骤可以在托管应用程序的多个节点中运行。有人试过吗？任何想法都会受到高度赞赏！

Answer 1

有两种方法：

1. Remote chunking - 您在主节点上读取数据并在从属节点上处理/写入

2. Remote partitioning - 您将数据集分割为分区，并在远程节点中读取/处理/写入分区。所以master只是协调和决定如何切片分区。

我写了一本关于Enterprise Spring的书，我创建了两种方法的例子。这些是hosted on Github。查看示例0939和0940.不幸的是，所有关于如何手动运行它们的注释都只在书中。希望你能从集成测试中找到答案。

预先要求是让消息中间件（例如ActiveMQ或HornetQ）可用于主从通信，并且它还使用Spring Integration来促进这种通信。