只在一个服务器实例上激活Batch

Question

我在两个tomcat实例前面有一个nginx负载平衡器，每个实例都包含一个Spring引导应用程序。每个Spring引导应用程序执行一个在数据库中写入数据的批处理。批处理每天凌晨1点执行。问题是两个实例同时执行批处理，这是我不想要的。

有没有办法让批处理部署在两个实例中，并告诉tomcat或nginx在主服务器中启动批处理（而从服务器不运行批处理）。

如果其中一个服务器停止，第二个服务器可以代表他启动批处理。

nginx或tomcat（或其他技术）中是否有工具可以做到这一点？

提前谢谢你。

Answer 1

我确实实现了一个简单的BCM服务器功能，所有服务器都使用其唯一的IP注册（创建一个服务器表条目）。服务器需要在规定的时间内注册（例如10秒）。如果服务器未在时间内注册（上次更新时间戳

最后，我有一个有序的服务器条目表，可以唯一地定义注册服务器的任务。

它的实现非常简单，工作非常完美。之前我也考虑过Spring批处理作业共享功能，但我希望zu有一个更轻量级、更灵活的解决方案。

目前，我在所有需要实施批处理的项目中都使用了它。

Answer 2

如果您设计两个应用服务器实例同时运行同一个作业，那么按照设计，一个将成功创建作业实例，另一个将失败（这个失败可以忽略）。请参阅JobRepository的Javadoc。这是作业存储库的作用之一：在集群环境中充当防止重复作业执行的保护措施。

如果其中一台服务器停止，第二台服务器可以代表他启动批处理。nginx或tomcat（或其他技术）中是否有工具可以做到这一点？

我相信不需要这样的工具或技术。如果其中一台服务器在时间表上停机，另一台就可以接管并成功启动这项工作。

Answer 3

这是一种过于简单的设计方法。

由于在两个VM中同时触发了两个计划的方法，因此在这两个VM中都添加一个随机延迟。这个答案有很多选项可以选择如何将触发延迟一段随机的时间。Spring@Scheduled annotation随机延迟

在方法内部，只有当作业尚未启动时（由另一个虚拟机）才运行作业。这可以通过一个新表来跟踪。

以下是此设计的伪代码：

@Scheduled(cron = "schedule expression")
public void batchUpdateMethod() {
     //Check database for signs of job running now.
     if (job is not running){
         //update database table to indicate job is running
         //Run the batch job
         //update database table to indicate job is finished
     }
}

由于两个虚拟机彼此独立，因此数据库或某个公共文件位置应被用作两次运行之间同步的锁。

对于更健壮的设计，考虑Spring Spring Spring批次使用其作业的数据库（JoWorsRealSo蓄）。默认情况下，内存中的数据源用于跟踪正在运行的作业及其状态。在您的设置中，这两个实例（很可能）正在使用它们自己的内存数据库。Spring Batch的多个实例可以作为一个集群相互协调，其中一个可以运行作业，而另一个可以作为备份（如果共享了jobsRepository数据库）。为此，需要将这两个实例配置为使用公共数据源。

以下是一些文档：https://docs.spring.io/spring-batch/docs/current/reference/html/index-single.html#jobrepository

https://docs.spring.io/spring-batch/docs/current/reference/html/job.html#configuringJobRepository