在Spring Webflow中执行阻塞JDBC调用

Question

我正在使用Spring Webflux和Spring数据jpa，使用PostgreSql作为后端数据库。我不想在进行诸如查找和保存之类的db调用时阻塞主线程。为了实现同样的目标，我在Controller类中有一个主调度器，在服务类中有一个jdbcScheduler。

我定义它们的方式是：

@Configuration
@EnableJpaAuditing
public class CommonConfig {

    @Value("${spring.datasource.hikari.maximum-pool-size}")
    int connectionPoolSize;

    @Bean
    public Scheduler scheduler() {
        return Schedulers.parallel();
    }

    @Bean
    public Scheduler jdbcScheduler() {
        return Schedulers.fromExecutor(Executors.newFixedThreadPool(connectionPoolSize));
    }

    @Bean
    public TransactionTemplate transactionTemplate(PlatformTransactionManager transactionManager) {
        return new TransactionTemplate(transactionManager);
    }
}

现在，当在我的服务层中进行获取/保存调用时，我这样做：

    @Override
    public Mono<Config> getConfigByKey(String key) {
        return Mono.defer(
            () -> Mono.justOrEmpty(configRepository.findByKey(key)))
            .subscribeOn(jdbcScheduler)
            .publishOn(scheduler);
    }

    @Override
    public Flux<Config> getAllConfigsAfterAppVersion(int appVersion) {
        return Flux
            .fromIterable(configRepository.findAllByMinAppVersionIsGreaterThanEqual(appVersion))
            .subscribeOn(jdbcScheduler)
            .publishOn(scheduler);
    }

    @Override
    public Flux<Config> addConfigs(List<Config> configList) {
        return Flux.fromIterable(configRepository.saveAll(configList))
            .subscribeOn(jdbcScheduler)
            .publishOn(scheduler);
    }

在控制器中，我执行以下操作：

    @PostMapping
    @ResponseStatus(HttpStatus.CREATED)
    Mono<ResponseDto<List<Config>>> addConfigs(@Valid @RequestBody List<Config> configs) {
        return configService.addConfigs(configs).collectList()
            .map(configList -> new ResponseDto<>(HttpStatus.CREATED.value(), configList, null))
            .subscribeOn(scheduler);
    }

这是正确的吗？和/或有更好的方法吗？

我的理解是：

.subscribeOn(jdbcScheduler)
.publishOn(scheduler);

该任务是否将在jdbcScheduler线程上运行，稍后的结果将在我的主并行调度程序上发布。这种理解正确吗？

Answer 1

恕我直言，有一种方法可以更好地利用机器资源来执行此操作。在留档后，您可以将调用包装在其他线程中，这样您就可以继续执行。

Answer 2

您对发布和订阅的理解是正确的（请参阅Reactor项目中有关这些操作员的参考文档）。

如果调用阻塞库而不调度在特定调度器上工作的线程，那么这些调用将阻塞少数可用线程中的一个线程（默认情况下，Netty事件循环），并且应用程序将只能同时服务少数请求。

现在我不知道你这样做是想达到什么目的。

首先，并行调度程序是为受CPU限制的任务而设计的，这意味着您将拥有很少的任务，与CPU内核一样多（或更多）。在这种情况下，这就像将您的线程池大小设置为常规Servlet容器上的内核数量。您的应用程序将无法处理大量并发请求。

即使您选择了更好的替代方案（如弹性调度器），它仍然不如Netty事件循环好，Netty事件循环是在Spring WebFlux中本机调度请求处理的地方。

如果您的最终目标是性能和可伸缩性，那么在反应式应用程序中包装阻塞调用的性能可能会比常规Servlet容器差。

您可以使用Spring MVC和：

• 在处理阻塞库时使用常用的阻塞返回类型，如JPA
• 当您不受这些库的限制时，请使用Mono和Flux返回类型

这不会是非阻塞的，但它仍然是异步的，您将能够并行完成更多的工作，而无需处理复杂性。