并行Spring批作业的推荐方法

Question

Spring批处理集成文档解释了如何使用远程分块和分区的步骤，请参见

http://docs.spring.io/spring-batch/trunk/reference/html/springbatchintegration.html#Externalizing-batch-process-execution

我们的工作不包括简单的读取器/处理器/写入器步骤。因此，我们只想让整个作业并行运行，每个作业分配到不同的分区。

在Spring批处理中是否已有此模式？还是需要实现自己的JobLauncher来维护启动作业的从属池？

干杯，曼诺

Answer 1

Spring Batch特别采取了不处理作业编排的立场（您的问题基本上是关于这个问题的）。有几种类似的方法：

• 分布式调度器-大多数分布式调度器都能够在多个节点上执行任务。例如，石英具有分布式模式。
• 使用远程分区进行编排-远程分区作为从机执行完整的Spring批处理步骤。这些步骤没有理由不是执行作业的作业步骤。
• 消息驱动的作业启动-Spring批处理集成（Spring批处理的子模块）提供了通过消息启动作业的功能。另一种方法是让一组从机监听队列，等待消息启动作业。您必须以某种方式处理从机之间的负载平衡之类的事情，但这是处理作业编排的另一种常用方法。